data-integration

Apache Airflow - Uma plataforma para criar, agendar e monitorar fluxos de trabalho programaticamente

Movimentação de dados de código aberto para pipelines ELT e agentes de IA — de APIs, bancos de dados e arquivos para warehouses, lakes e aplicações de IA. Tanto auto-hospedado quanto em nuvem.

Transforma dados e algoritmos de IA em aplicações web prontas para produção em pouco tempo.

Uma plataforma de orquestração para o desenvolvimento, produção e observação de ativos de dados.

SeaTunnel é uma ferramenta de integração de dados massivos, distribuída, de alto desempenho e multimodal.

Construa, execute e gerencie pipelines de dados para integrar e transformar dados.

Pipelines de dados para configurações de nuvem e dados de segurança. Construa soluções de inventário de ativos em nuvem, CSPM, FinOps e gerenciamento de vulnerabilidades. Extraia dados de AWS, Azure, GCP e mais de 70 fontes de nuvem e SaaS.

Flink CDC é uma ferramenta de integração de dados em streaming

Upserts, exclusões e processamento incremental em Big Data.

🦀 processamento de fluxo de eventos para desenvolvedores coletarem e transformarem dados em movimento para alimentar aplicações responsivas intensivas em dados.

Jitsu é uma alternativa de código aberto ao Segment. Mecanismo de ingestão de dados totalmente programável para equipes de dados modernas. Configure um pipeline de dados em tempo real em minutos, não em dias

Onde o acesso a dados encontra a inteligência operacional.

Alternativa ao Segment focada em privacidade e segurança, escrita em Golang e React

Um framework de integração de dados

ingestr é uma ferramenta CLI para copiar dados entre quaisquer bancos de dados com um único comando de forma integrada.

Lista com curadoria da comunidade de pacotes de software e recursos de dados para célula única, incluindo RNA-seq, ATAC-seq, etc.

Apache DevLake é uma plataforma de dados de desenvolvimento de código aberto para ingerir, analisar e visualizar dados fragmentados de ferramentas de DevOps, extraindo insights para excelência em engenharia, experiência do desenvolvedor e crescimento da comunidade.

A superglue (YC W25) cria integrações e ferramentas a partir de linguagem natural. Obtenha ferramentas de nível de produção para sistemas de cauda longa e corporativos.

Plataforma de Orquestração Hop

Uma ferramenta de ETL rápida e versátil que pode transferir dados entre RDBMS e NoSQL de forma integrada

ETL/ELT open-source para implantar nos seus próprios servidores ou nuvem. Construído sobre DuckDB: pipelines visuais no-code/low-code ou SQL, 385 componentes, dbt, CDC, qualidade de dados, reverse ETL, linhagem e MCP para agentes de IA. Sem nuvem de fornecedor, sem cobrança por linha.

Tutoriais e artigos esclarecedores sobre Grafos de Conhecimento

🌊 Sincronize continuamente os sistemas onde seus dados residem com os sistemas onde você deseja que eles estejam, gerenciando seus fluxos de dados com o Estuary. 🌊

O SeaTunnel é uma plataforma de integração de dados distribuída de alto desempenho para sincronização e transformação de dados massivos (offline e tempo real).

Lista de artigos atualizada continuamente sobre avanços em Data Agents. Repositório complementar ao nosso artigo "A Survey of Data Agents: Emerging Paradigm or Overstated Hype?"

NicheNet: preveja ligações ativas entre ligante e alvo entre células que interagem

Integração rápida, sensível e precisa de dados de célula única com Harmony

O Conduit transmite dados entre armazenamentos de dados. Um substituto para o Kafka Connect. Não requer JVM.

Uma lista curada de ferramentas de código aberto usadas em plataformas de análise e no ecossistema de engenharia de dados

Compilação de materiais relacionados ao Apache Hudi