dataops

Open Lakehouse Format 用於多模態 AI，兩行程式碼即可將 Parquet 轉換，速度提升 100 倍，支援 Pandas、DuckDB、Polars、Pyarrow 與 PyTorch，未來將加入更多整合

Redpanda Console 是一個面向開發者的 UI，協助管理 Kafka/Redpanda 工作負載。Console 提供簡單互動式介面，讓你能查看主題、遮蔽資料、管理消費者群組，並以時間旅行偵錯方式探索即時資料

可擴展且高效的資料轉換框架，向後相容 dbt

用於機器學習模型與資料管道的開源資料記錄函式庫。📚 提供對資料品質與模型長期效能的可視性。🛡️ 支援保護隱私的資料收集，確保安全與穩健性。📈

Meltano：宣告式、程式碼優先的資料整合引擎，助力實現您最狂野的資料與 ML 驅動產品創意。告別編寫、維護和擴充您自己的 API 整合。

專為資料與分析工程師打造的 dbt 原生資料可觀測性解決方案。幾分鐘內即可監控您的資料管線。提供具備進階功能的自我主機部署或雲端服務。

用於開發的 Kafka Docker。包含 Kafka、Zookeeper、Schema Registry、Kafka-Connect 以及 20 多個連接器。

雲原生數智運維平台

基於 Flink、DataX 與 Flink-CDC 並支援 Web-UI 的敏捷 Ontology DataOps 支援方案

📙 超讚的資料目錄與可觀測性平台。

Optimus 是一個易於使用、可靠且高效能的工作流程協調器，用於資料轉換、資料建模、管線與資料品質管理。

Tenzir 是專為安全團隊打造的資料管線引擎。

Polyaxon 的 AI/ML/資料追蹤、視覺化、可解釋性、漂移檢測與儀表板引擎。