data-integration

Apache Airflow - Une plateforme pour créer, planifier et surveiller des flux de travail par programmation

Transfert de données open-source pour pipelines ELT et agents IA — depuis les API, bases de données et fichiers vers des entrepôts, lacs de données et applications IA. Disponible en auto-hébergement ou via le Cloud.

Transforme rapidement des données et des algorithmes d'IA en applications web prêtes pour la production.

Une plateforme d'orchestration pour le développement, la production et l'observation d'actifs de données.

SeaTunnel est un outil d'intégration de données massives, multimodal, haute performance et distribué.

Construisez, exécutez et gérez des pipelines de données pour l'intégration et la transformation de données.

Pipelines de données pour la configuration cloud et la sécurité. Créez des solutions d'inventaire d'actifs cloud, de CSPM, de FinOps et de gestion des vulnérabilités. Extraction depuis AWS, Azure, GCP et plus de 70 sources cloud et SaaS.

Flink CDC est un outil d'intégration de données en streaming

Upserts, suppressions et traitement incrémental sur les Big Data.

🦀 Traitement de flux d'événements pour collecter et transformer des données en mouvement afin d'alimenter des applications réactives intensives en données.

Jitsu est une alternative open source à Segment. Moteur d'ingestion de données entièrement scriptable pour les équipes de données modernes. Configurez un pipeline de données en temps réel en quelques minutes.

Là où l'accès aux données rencontre l'intelligence opérationnelle

Alternative à Segment axée sur la confidentialité et la sécurité, développée en Golang et React.

Un framework d'intégration de données

ingestr est un outil CLI pour copier des données entre n'importe quelles bases de données avec une seule commande.

Liste organisée par la communauté de paquets logiciels et de ressources de données pour la cellule unique, incluant RNA-seq, ATAC-seq, etc.

Apache DevLake est une plateforme de données open-source destinée à ingérer, analyser et visualiser les données fragmentées des outils DevOps, afin d'extraire des indicateurs pour l'excellence en ingénierie, l'expérience développeur et la croissance de la communauté.

superglue (YC W25) crée des intégrations et des outils à partir du langage naturel. Obtenez des outils de qualité production pour les systèmes de niche et d'entreprise.

Plateforme d'orchestration Hop

Un outil ETL rapide et polyvalent capable de transférer des données de manière transparente entre RDBMS et NoSQL

Solution ETL/ELT open-source à déployer sur vos propres serveurs ou dans le cloud. Basée sur DuckDB : pipelines visuels no-code/low-code ou SQL, 385 composants, dbt, CDC, qualité des données, reverse ETL, lignage, MCP pour agents IA. Sans cloud propriétaire ni facturation par ligne.

Tutoriels et articles instructifs sur les graphes de connaissances

Synchronisez en continu les systèmes où résident vos données vers les systèmes où vous souhaitez qu'elles soient, en gérant vos flux de données avec Estuary.

SeaTunnel est une plateforme d'intégration de données distribuée et haute performance pour la synchronisation et la transformation de données massives (hors ligne et en temps réel).

Liste de publications mise à jour en continu sur les avancées des agents de données. Dépôt associé à notre article "A Survey of Data Agents: Emerging Paradigm or Overstated Hype?"

NicheNet : prédire les liens actifs ligand-cible entre les cellules interactantes.

Intégration rapide, sensible et précise de données cellule unique avec Harmony

Conduit diffuse des données entre des magasins de données. Remplacement de Kafka Connect. Aucun JVM requis.

Une liste de référence d'outils open source utilisés dans les plateformes d'analytique et l'écosystème de l'ingénierie des données

Compilation de ressources concernant Apache Hudi