etl

Extração de dados não estruturados rápida e eficiente. Escrito em Rust com bindings para várias linguagens.

🔥🔥🔥 Reverse ETL open source - alternativa ao hightouch e census.

Ferramenta de relatórios de banco de dados e tarefas (.Net).

Um motor de processamento de fluxo em Python modelado a partir do Yahoo! Pipes

O Dozer é uma ferramenta de movimentação de dados em tempo real que utiliza CDC de várias origens e move os dados para vários destinos.

A plataforma aberta de inteligência de documentos para criadores e hackers - DMS para o mundo dos agentes

Plataforma de Orquestração Hop

Uma ferramenta de ETL rápida e versátil que pode transferir dados entre RDBMS e NoSQL de forma integrada

Sincronização de Postgres, MySQL ou MariaDB para Elasticsearch/OpenSearch.

Preparação visual de dados baseada em Python

Suporte a DataOps de ontologia ágil baseado em Flink, DataX e Flink-CDC com interface web.

Este repositório é um guia de introdução ao Singer.

Kit de ferramentas ETL em TypeScript para indexar dados de Ethereum, Solana e Substrate, provenientes da SQD Network.

um daemon em Go que sincroniza o MongoDB com o Elasticsearch em tempo real. Sabe, para buscas.

ETL/ELT open-source para implantar nos seus próprios servidores ou nuvem. Construído sobre DuckDB: pipelines visuais no-code/low-code ou SQL, 385 componentes, dbt, CDC, qualidade de dados, reverse ETL, linhagem e MCP para agentes de IA. Sem nuvem de fornecedor, sem cobrança por linha.

Extensão de replicação lógica para PostgreSQL 17, 16, 15, 14, 13, 12, 11, 10, 9.6, 9.5, 9.4 (Postgres), oferecendo replicação muito mais rápida que Slony, Bucardo ou Londiste, além de atualizações entre versões.

Componentes React para criar arquivos CSV dinamicamente com base em arrays ou objetos literais de dados

omniparser: uma biblioteca nativa em Golang de parsing e transformação de streaming ETL para CSV, JSON, XML, EDI, texto, etc.

🌊 Sincronize continuamente os sistemas onde seus dados residem com os sistemas onde você deseja que eles estejam, gerenciando seus fluxos de dados com o Estuary. 🌊

Um guia abrangente para construir um data warehouse moderno com SQL Server, incluindo processos de ETL, modelagem de dados e análises.

Sling é uma ferramenta de CLI que extrai dados de um armazenamento/banco de dados de origem e os carrega em um armazenamento/banco de dados de destino.

Neum AI é um framework de primeira linha para gerenciar a criação e sincronização de embeddings vetoriais em larga escala.

Framework ETL para .NET (Parser / Writer para arquivos formatados em CSV, Flat, Xml, JSON, Key-Value, Parquet, Yaml, Avro)

Engine de automação de fluxo de trabalho.

Processamento de dados em massa com um ETL completo para desenvolvedores .NET

Optimus é um orquestrador de fluxo de trabalho fácil de usar, confiável e de alto desempenho para transformação de dados, modelagem de dados, pipelines e gerenciamento de qualidade de dados.

Utilitário que converte um arquivo .etl contendo uma captura de pacotes de rede do Windows para o formato .pcapng.

Transforme, consulte e baixe dados geoespaciais na web.

📄 ⚙️ Processos ETL para artigos médicos e científicos

Cliente Python e Toolkit para DataFrames, Big Data, Machine Learning e ETL no Elasticsearch