etl

Trích xuất dữ liệu phi cấu trúc nhanh chóng và hiệu quả. Viết bằng Rust với các binding cho nhiều ngôn ngữ.

🔥🔥🔥 Reverse ETL mã nguồn mở - giải pháp thay thế cho hightouch và census.

Công cụ báo cáo cơ sở dữ liệu và tác vụ (.Net)

Công cụ xử lý luồng Python phỏng theo Yahoo! Pipes

Dozer là công cụ chuyển động dữ liệu thời gian thực tận dụng CDC từ nhiều nguồn khác nhau và chuyển dữ liệu đến các đích đến khác nhau.

Nền tảng tình báo tài liệu mã nguồn mở dành cho nhà phát triển và hacker - DMS cho thế giới agent

Nền tảng điều phối Hop Orchestration Platform

Một công cụ ETL nhanh chóng và linh hoạt có thể truyền dữ liệu liền mạch giữa RDBMS và NoSQL

Đồng bộ dữ liệu từ Postgres, MySQL hoặc MariaDB sang Elasticsearch/OpenSearch

chuẩn bị dữ liệu trực quan hỗ trợ bởi python

Hỗ trợ Ontology DataOps linh hoạt dựa trên Flink, DataX và Flink-CDC với Web-UI.

Kho lưu trữ này là hướng dẫn bắt đầu sử dụng Singer.

Bộ công cụ TypeScript ETL để lập chỉ mục dữ liệu Ethereum, Solana và Substrate, lấy nguồn từ SQD Network.

một Go daemon đồng bộ MongoDB với Elasticsearch theo thời gian thực. Dành cho việc tìm kiếm.

Mã nguồn mở ETL/ELT để bạn triển khai trên server riêng hoặc đám mây. Xây dựng trên DuckDB: chuỗi quy trình trực quan no-code/low-code hoặc SQL, 385 thành phần, dbt, CDC, chất lượng dữ liệu, reverse ETL, lineage, MCP cho AI agent. Không có đám mây nhà cung cấp, không tính phí theo dòng.

Phần扩展 Logical Replication cho PostgreSQL 17, 16, 15, 14, 13, 12, 11, 10, 9.6, 9.5, 9.4 (Postgres), cung cấp khả năng nhân bản nhanh hơn nhiều so với Slony, Bucardo hoặc Londiste, cũng như nâng cấp giữa các phiên bản.

Các thành phần React để tạo file CSV trực tiếp dựa trên mảng/đối tượng dữ liệu dạng chữ

omniparser: thư viện phân tích và chuyển đổi luồng ETL viết bằng Golang cho CSV, JSON, XML, EDI, văn bản, v.v.

🌊 Liên tục đồng bộ hóa các hệ thống lưu trữ dữ liệu của bạn sang các hệ thống bạn muốn, bằng cách quản lý luồng dữ liệu với Estuary. 🌊

Hướng dẫn toàn diện về cách xây dựng kho dữ liệu hiện đại với SQL Server, bao gồm các quy trình ETL, mô hình hóa dữ liệu và phân tích.

Sling là một công cụ CLI giúp trích xuất dữ liệu từ kho lưu trữ/cơ sở dữ liệu nguồn và nạp vào kho lưu trữ/cơ sở dữ liệu đích.

Neum AI là framework hàng đầu để quản lý việc tạo và đồng bộ hóa vector embeddings ở quy mô lớn.

Framework ETL cho .NET (Trình phân tích cú pháp / Trình ghi cho các tệp định dạng CSV, Flat, Xml, JSON, Key-Value, Parquet, Yaml, Avro)

Công cụ tự động hóa quy trình làm việc

Xử lý dữ liệu hàng loạt với quy trình ETL hoàn chỉnh dành cho các nhà phát triển .NET.

Optimus là công cụ điều phối quy trình làm việc dễ sử dụng, đáng tin cậy và hiệu năng cao cho việc chuyển đổi dữ liệu, mô hình hóa dữ liệu, đường ống dữ liệu và quản lý chất lượng dữ liệu.

Tiện ích chuyển đổi tệp .etl chứa dữ liệu bắt gói tin mạng Windows sang định dạng .pcapng.

Chuyển đổi, truy vấn và tải xuống dữ liệu không gian địa lý trên web.

📄 ⚙️ Các quy trình ETL cho tài liệu y khoa và khoa học

Client và bộ công cụ Python cho DataFrames, Big Data, Machine Learning và ETL trong Elasticsearch.