data-ingestion

SeaTunnel 是一款多模式、高效能、分散式、大規模資料整合工具。

ingestr 是一個 CLI 工具，能用單一命令無縫複製任何資料庫之間的資料

Apache Paimon 是一種湖泊格式，能與 Flink 與 Spark 一同構建即時湖屋架構，支援流式與批處理

使用 Elixir 進行並行與多階段的資料攝取與資料處理

Pravega - 作為全新軟體定義儲存原語的串流系統

使用 SQL 與 Python 建立資料管線、從不同來源擷取資料、加入品質檢查，並建構端到端流程。

在 PostgreSQL 內部與 S3、Azure Blob Storage、Google Cloud Storage、http(s) 儲存空間、本機檔案或標準輸入輸出串流之間進行 Parquet 複製

AI 時代的 Supabase。一個模組化、開源的後端，用於構建 AI 原生軟體——專為知識而非靜態資料設計。