etl

빠르고 효율적인 비정형 데이터 추출. 다양한 언어 바인딩을 지원하는 Rust로 작성됨.

🔥🔥🔥 오픈 소스 Reverse ETL - Hightouch 및 Census의 대안

데이터베이스 리포팅 도구 및 작업 (.Net)

Yahoo! Pipes를 모델로 한 Python 스트림 처리 엔진

Dozer는 다양한 소스에서 CDC를 활용하고 데이터를 다양한 싱크로 이동시키는 실시간 데이터 전송 도구입니다.

빌더와 해커를 위한 오픈 문서 인텔리전스 플랫폼 - 에이전틱 세상을 위한 DMS

Hop 오케스트레이션 플랫폼

RDBMS와 NoSQL 간에 데이터를 원활하게転송할 수 있는 빠르고 다기능적인 ETL 도구

Postgres, MySQL, MariaDB를 Elasticsearch/OpenSearch로 동기화

Python 기반의 시각적 데이터 준비 도구

Web-UI를 포함하며 Flink, DataX, Flink-CDC 기반의 애자일 Ontology DataOps 지원

이 저장소는 Singer 입문 가이드입니다.

SQD Network에서 소스를 가져와 Ethereum, Solana 및 Substrate 데이터를 인덱싱하기 위한 TypeScript ETL 툴킷.

MongoDB를 Elasticsearch에 실시간으로 동기화하는 Go 데몬.

자체 서버나 클라우드에 배포하는 오픈소스 ETL/ELT. DuckDB 기반: 노코드/로우코드 비주얼 파이프라인 또는 SQL, 385개의 컴포넌트, dbt, CDC, 데이터 품질, 리버스 ETL, 리니지, AI 에이전트를 위한 MCP. 벤더 클라우드 없음, 행(row)별 과금 없음.

PostgreSQL 17, 16, 15, 14, 13, 12, 11, 10, 9.6, 9.5, 9.4용 논리적 복제(Logical Replication) 확장 프로그램으로, Slony, Bucardo, Londiste보다 훨씬 빠른 복제 성능과 버전 간 업그레이드를 제공합니다.

데이터 배열/리터럴 객체를 기반으로 실시간에 CSV 파일을 생성하는 React 컴포넌트

omniparser: CSV, JSON, XML, EDI, 텍스트 등을 위한 네이티브 Golang ETL 스트리밍 파서 및 변환 라이브러리

🌊 Estuary로 데이터 흐름을 관리하여 데이터가 있는 시스템을 원하는 시스템과 지속적으로 동기화하세요. 🌊

ETL 프로세스, 데이터 모델링 및 분석을 포함하여 SQL Server로 현대적인 데이터 웨어하우스를 구축하기 위한 종합 가이드.

Sling은 소스 스토리지/데이터베이스에서 데이터를 추출하여 타겟 스토리지/데이터베이스로 로드하는 CLI 도구입니다.

Neum AI는 대규모 벡터 임베딩의 생성 및 동기화를 관리하기 위한 동급 최강의 프레임워크입니다.

.NET용 ETL 프레임워크 (CSV, Flat, Xml, JSON, Key-Value, Parquet, Yaml, Avro 형식 파일 파서/라이터)

워크플로우 자동화 엔진

.NET 개발자를 위한 완전한 ETL을 통한 대량 데이터 처리

Optimus는 데이터 변환, 데이터 모델링, 파이프라인 및 데이터 품질 관리를 위한 사용기 쉽고 안정적이며 고성능인 워크플로 오케스트레이터입니다.

Windows 네트워크 패킷 캡처가 포함된 .etl 파일을 .pcapng 형식으로 변환하는 유틸리티입니다.

웹에서 지형 공간 데이터를 변환, 쿼리 및 다운로드합니다.

📄 ⚙️ 의학 및 과학 논문을 위한 ETL 프로세스

Elasticsearch에서 데이터 프레임, 빅데이터, 머신 러닝 및 ETL을 위한 Python 클라이언트 및 툴킷입니다.