elt

Apache Airflow - Platform untuk membuat, menjadwalkan, dan memantau alur kerja secara terprogram.

Pemindahan data sumber terbuka untuk pipeline ELT dan agen AI — dari API, database & file ke gudang data, danau data, dan aplikasi AI. Tersedia dalam versi self-hosted dan Cloud.

dbt memungkinkan analis dan insinyur data untuk mentransformasi data mereka menggunakan praktik yang sama dengan yang digunakan insinyur perangkat lunak untuk membangun aplikasi.

SeaTunnel adalah alat integrasi data masif terdistribusi, berkinerja tinggi, dan multimodal.

Membangun, menjalankan, dan mengelola pipeline data untuk integrasi dan transformasi data.

Pipeline data untuk konfigurasi cloud dan data keamanan. Membangun inventaris aset cloud, CSPM, FinOps, dan solusi manajemen kerentanan. Mengekstrak data dari AWS, Azure, GCP, serta lebih dari 70 sumber cloud dan SaaS.

Flink CDC adalah alat integrasi data streaming

data load tool (dlt) adalah library Python open source yang memudahkan pemuatan data 🛠️

Alternatif Segment yang berfokus pada privasi dan keamanan, dibangun dengan Golang dan React

Sistem untuk pemrosesan data dan ETL berbasis LLM yang bersifat agen

Maestro: Orchestrator Alur Kerja dari Netflix.

Kerangka kerja transformasi data yang skalabel dan efisien - kompatibel dengan dbt.

Meltano: mesin integrasi data deklaratif berbasis kode yang mendukung ide produk berbasis data dan ML Anda. Ucapkan selamat tinggal pada penulisan, pemeliharaan, dan penskalaan integrasi API Anda sendiri.

BI open-source untuk engineer

OLake - Replikasi Database, Kafka & S3 Tercepat ke Apache Iceberg dengan optimasi tabel (Disebut OLake Fusion). ⚡ Ingesti data yang efisien, cepat, dan dapat ditingkatkan untuk analitik real-time. Sumber yang didukung: Postgres, MongoDB, MySQL, Oracle, MSSql, DB2, Kafka, S3.

ETL/ELT open-source yang Anda deploy di server atau cloud Anda sendiri. Dibangun di atas DuckDB: pipeline visual tanpa kode/rendah kode atau SQL, 385 komponen, dbt, CDC, kualitas data, reverse ETL, lineage, MCP untuk agen AI. Tanpa cloud vendor, tanpa penagihan per baris.

🌊 Sinkronisasikan sistem tempat data Anda berada secara terus-menerus ke sistem tempat Anda _menginginkannya_ berada, dengan mengelola aliran data Anda menggunakan Estuary. 🌊

Sling adalah alat CLI yang mengekstrak data dari penyimpanan/basis data sumber dan memuatnya ke penyimpanan/basis data target.

Optimus adalah orkestrator alur kerja yang mudah digunakan, andal, dan berkinerja tinggi untuk transformasi data, pemodelan data, pipeline, dan manajemen kualitas data.

Integrasi dbt + Metabase

Paket dbt gratis untuk membuat dan memuat Data Warehouse yang sesuai dengan Data Vault 2.0 (didukung oleh dbt, alat rekayasa data sumber terbuka, merek dagang terdaftar dari dbt Labs)