pipeline

チェーン関数型プログラミングでデータパイプラインを作成するための Python ライブラリ

cubestudioはオープンソースのクラウドネイティブなワンストップ機械学習/ディープラーニング/大規模モデルAIプラットフォーム、MaaS/mlops/AIプラットフォームであり、アルゴリズムの全プロセス、マルチテナント、計算力レンタルプラットフォーム、token中継、ドラッグ＆ドロップによるタスクフローpipelineオーケストレーション、マルチマシン・マルチカード分散トレーニング、ハイパーパラメータ探索、推論サービス、VGPU仮想化、クラウド・エッジ・デバイス協調、エッジコンピューティング、自動アノテーションプラットフォーム、deepseekなどの大規模モデルSFTファインチューニング/報酬モデル/強化学習トレーニング、vllm/ollama/mindie大規模モデルマルチマシン推論、プライベートナレッジベースllmopsエージェント、AIモデルマーケットプレイスを提供し、国産の異構計算力スケジューリング（昇騰、寒武紀、海光、摩尔、沐曦など）やib/roce/RDMA、信創に対応しています。

🔮 Instill Coreは、データ、モデル、パイプラインのオーケストレーションを行うフルスタックAIインフラストラクチャツールであり、多用途なAIファーストアプリケーション構築のあらゆる側面を効率化するように設計されています。

【よく使われる C++ & Python DAG フレームワーク】サードパーティ依存なし、クロスプラットフォーム対応、awesome-cpp 掲載、フローグラフベースの汎用並列計算フレームワーク。Star、Fork、交流を歓迎します

単一の C++ バイナリによる最速の統合型ストリーミング SQL エンジン。⚡ ミリ秒単位のレイテンシ、100+ GB/s のスループット。ストリーム、ログ、メトリクス、イベント、CDC からリアルタイムコンテキストを継続的に計算します。

Go向けの軽量ストリーム処理ライブラリ

Juliaの機械学習フレームワーク

XLS: 高速化されたハードウェア合成

クリーンで構成可能な、チャネルベースの並行処理を行うためのGoツールキット

すべての人のためのデータ集約型科学

迅速なR&DプロトタイピングとKaggleでの成果獲得のためのPyTorch拡張機能

Hop オーケストレーションプラットフォーム

標準入力からのデータを受け取り、ターミナル/コンソール上にリアルタイムでプロットするユーティリティ

STAR、RSEM、HISAT2、またはSalmonを使用したRNAシーケンス解析パイプライン。遺伝子/アイソフォームのカウントと豊富な品質管理機能を提供します。

再現性とハイパフォーマンスコンピューティングのための、Rに特化したパイプラインツールキット

Rust で構築された、高性能、モジュール式、メモリ安全かつ本番環境対応の推論、取り込み、インデックス作成ツール 🦀

藍鯨智雲標準運維 (SOPS)

最小限のメモリフットプリントでカスタムの JSON および JSONC 処理パイプラインを構築するためのストリームコンポーネントのマイクロライブラリ — SAX にインスパイアされたトークン API を使用して、Node.js または Web Streams上で利用可能なメモリよりもはるかに大きな JSON をパース、フィルタリング、変換します。

ジョブを並列実行するためのクロスプラットフォーム対応コマンドラインツール

Goとコマンドラインを使用した、堅牢で柔軟かつリソース効率の高いパイプライン

R 向けの関数指向かつ Make 風な宣言型ワークフロー

オープンソースのMLパイプライン開発プラットフォーム

小規模な自動化パイプライン。最小限のプロジェクトにCI/CDを導入。セルフホスト型、軽量、CLIのみ。

Tekton 用ダッシュボード

使いやすいワークフローエンジンをサポートする WDL、CWL、Python の API。スケーラブルで効率的、かつクロスプラットフォーム（Linux/macOS）に対応しています。

機械学習モデル向けの柔軟で高性能なサービングフレームワーク（PaddlePaddleサービングデプロイメントフレームワーク）

Neum AIは、大規模なベクトル埋め込みの作成と同期を管理するためのクラス最高峰のフレームワークです

組み合わせ可能な AI ワークフローのための宣言型言語。エージェントおよび人間のための開発ツール。

🪿 LinGoose は、素晴らしい AI/LLM アプリケーションを構築するための Go 製フレームワークです。

Plumber は GitHub ワークフロー内の CI/CD セキュリティ上の問題を検出し、スコアを算出します