pathwaycom/pathway

外部のオープンソース リポジトリを紹介するページです。HDATFの製品ではありません。

何をするか

バッチ処理とストリーム処理、リアルタイム分析、LLMパイプライン、RAGのためのPython ETLフレームワークです。Pythonのコードは増分計算を行うRustエンジン上で動き、同じコードでローカル開発、バッチジョブ、ストリーミングに対応します。

ATFへの役立ち方

AX consultingで、MESやERPなどのシステムの記録を変化に合わせて分析や検索に流す必要がある場合の参考になり得ます。増分処理の仕組みは、Company Brainを最新の状態に保つ方法としても比較する価値があります。

ライセンス

独自ライセンス 標準ではない独自ライセンスです。再利用の前にライセンスファイルを確認してください。

同じ分野のリポジトリ

• koala73/worldmonitor
  厳選したニュースフィードをAIによる要約ブリーフにまとめ、地政学、インフラ、金融市場のシグナルを追跡するリアルタイムダッシュボードで、3D地球儀と平面地図の表示があります。AIはOllamaでローカル実行できます。
• D4Vinci/Scrapling
  Scraplingは、ページが変わってもパーサーが要素を再検出するPythonのWebスクレイピングフレームワークです。anti-botシステムを回避するfetcherと、一時停止、再開、プロキシのローテーションに対応した並行クロール用のspiderフレームワークを備えています。
• pinchtab/pinchtab
  AIエージェントがChromeを操作できるようにするGo製の独立したHTTPサーバーで、ヘッドレスブラウザのインスタンス、ダッシュボード、HTTP API、MCPサーバーを備えます。まずはローカルで一人のユーザーが使う前提で設計されています。
• lightpanda-io/browser
  Lightpandaは、AI agentと自動化のためにZigでゼロから作られたheadless browserです。ChromiumやWebKitのフォークではありません。
• calesthio/Crucix
  フライト追跡、放射線監視、紛争データ、市場価格など27のオープンソースインテリジェンスのフィードを15分ごとに集めて表示する、ローカル実行型のダッシュボードです。LLMを接続すると、TelegramやDiscordに通知を送り、コマンドに応答します。

Trendshiftのランキングに入ったリポジトリだけを載せ、リストは候補を探すためだけに使いました。順位の数字は転載していません。説明、ライセンス、スター数は各GitHubリポジトリで確認しました。解説は私たちの判断です。これらを試験したわけではなく、上昇リストに載ったことは品質の証明ではありません。