etl

Apple Notes（iCloud Notesを含む）をノートのフォルダ構造を維持したまま多様なフォーマットに一括エクスポートする、Swiftで書かれたmacOSアプリ

最高峰のオープンソース Data Quality ソリューション

データストア間でデータをストリーミングするConduit。Kafka Connectの代替。JVMは不要です。

🍁 Sycamoreは、非構造化データのためのLLMを活用した検索・分析プラットフォームです。

The Public Utility Data Liberation Project は、気候変動活動家、研究者、政策立案者、ジャーナリスト向けに、すぐに分析可能なエネルギーシステムデータを提供します。

分析プラットフォームやデータエンジニアリングエコシステムで使用されるオープンソースツールの厳選リスト

また別の冗長なワークフローエンジン

Rustで書かれたApeCloudのデータ転送スイート。MySQL、PostgreSQL、Redis、MongoDB、Kafka、ClickHouse間で超高速なデータレプリケーションを提供し、ディザスタリカバリ（DR）や移行シナリオに最適です。

Data Vault 2.0準拠のデータウェアハウスを作成およびロードするための、無料で使用できるdbtパッケージ（オープンソースのデータエンジニアリングツールであるdbtを搭載、dbt Labsの登録商標）

初心者向けデータエンジニアリングプロジェクト - バッチ版

Apache Spark をベースにした、シンプルで軽量な ETL フレームワーク

qDataは、ETL、データ開発、メタデータ管理、データ品質、データ資産、APIサービス、AIを活用したデータQ&Aを統合したオープンソースのデータガバナンスおよびデータ開発プラットフォームです

Web版 Kettle をベースに開発された、分散型の総合的なスケジューリング、管理、ETL 開発のためのプロフェッショナル向け B/S アーキテクチャツール

優れたシステム統合ソフトウェアとリソースの厳選リスト

VLMで使用する様々な業界特化型スキーマのハブ

ビッグデータ収集・抽出プラットフォーム。zdh_webはzdhシリーズサービスのビジュアル管理プラットフォームであり、データ収集、スケジューリング、権限管理、承認ワークフロー、プライベートドメインマーケティングなどのモジュールを含みます。

Excel ファイルの読み書きを行う Spark プラグイン