data-integration

Apache Airflow - वर्कफ़्लो को प्रोग्रामेटिक रूप से लिखने, शेड्यूल करने और मॉनिटर करने के लिए एक प्लेटफ़ॉर्म

ELT पाइपलाइनों और AI एजेंट्स के लिए ओपन-सोर्स डेटा मूवमेंट — API, डेटाबेस और फ़ाइलों से लेकर वेयरहाउस, लेक और AI एप्लिकेशन तक। सेल्फ-होस्टेड और क्लाउड दोनों।

डेटा और AI एल्गोरिदम को कुछ ही समय में उत्पादन-तैयार वेब अनुप्रयोगों में बदल देता है।

डेटा संपत्तियों के विकास, उत्पादन और अवलोकन के लिए एक ऑर्केस्ट्रेशन प्लेटफॉर्म।

SeaTunnel एक मल्टी-मोडल, उच्च-प्रदर्शन, वितरित, भारी डेटा इंटीग्रेशन टूल है।

🧙 डेटा को एकीकृत और रूपांतरित करने के लिए डेटा पाइपलाइन का निर्माण, संचालन और प्रबंधन करें।

क्लाउड कॉन्फ़िगरेशन और सुरक्षा डेटा के लिए डेटा पाइपलाइन। क्लाउड एसेट इन्वेंट्री, CSPM, FinOps, और vulnerabilty management समाधान बनाएं। AWS, Azure, GCP, और 70+ क्लाउड और SaaS स्रोतों से एक्सट्रैक्ट करें।

Flink CDC एक स्ट्रीमिंग डेटा इंटीग्रेशन टूल है।

बिग डेटा पर अपसर्ट, डिलीट और इंक्रीमेंटल प्रोसेसिंग।

🦀 developers ke liye data in motion ko collect aur transform karne ke liye event stream processing, taaki responsive data-intensive applications ko chalaya ja sake.

Jitsu एक ओपन-सोर्स Segment विकल्प है। आधुनिक डेटा टीमों के लिए पूरी तरह से स्क्रिप्टेबल डेटा अंतर्ग्रहण इंजन। कुछ ही मिनटों में वास्तविक समय का डेटा पाइपलाइन सेटअप करें।

जहां डेटा एक्सेस ऑपरेशनल इंटेलिजेंस से मिलता है।

Golang और React में गोपनीयता और सुरक्षा पर केंद्रित Segment का विकल्प

एक डेटा इंटीग्रेशन फ्रेमवर्क

ingestr एक ही कमांड के साथ किसी भी डेटाबेस के बीच डेटा को निर्बाध रूप से कॉपी करने के लिए एक CLI टूल है।

सिंगल-सेल के लिए सॉफ्टवेयर पैकेज और डेटा संसाधनों की समुदाय-क्यूरेटेड सूची, जिसमें RNA-seq, ATAC-seq, आदि शामिल हैं।

Apache DevLake एक ओपन-सोर्स देव डेटा प्लेटफ़ॉर्म है, जो DevOps टूल से खंडित डेटा को एकत्र, विश्लेषित और विज़ुअलाइज़ करता है, जिससे इंजीनियरिंग उत्कृष्टता, डेवलपर अनुभव और कम्युनिटी ग्रोथ के लिए इनसाइट्स निकाले जाते हैं।

superglue (YC W25) नेचुरल लैंग्वेज से इंटीग्रेशन और टूल बनाता है। लॉन्ग टेल और एंटरप्राइज सिस्टम के लिए प्रोडक्शन-ग्रेड टूल प्राप्त करें।

Hop ऑकेस्ट्रेशन प्लेटफ़ॉर्म

एक तेज़ और बहुमुखी ETL टूल जो RDBMS और NoSQL के बीच सहजता से डेटा स्थानांतरित कर सकता है

ओपन-सोर्स ETL/ELT जिसे आप अपने सर्वर या क्लाउड पर तैनात कर सकते हैं। DuckDB पर निर्मित: नो-कोड/लो-कोड विजुअल पाइपलाइन या SQL, 385 घटक, dbt, CDC, डेटा गुणवत्ता, रिवर्स ETL, लाइनage, AI एजेंटों के लिए MCP। कोई वेंडर क्लाउड नहीं, प्रति-पंक्ति बिलिंग नहीं।

Knowledge Graphs के बारे में ज्ञानवर्धक ट्यूटोरियल और पेपर।

Estuary के साथ डेटा प्रवाह को प्रबंधित करके, उन सिस्टम्स को लगातार सिंक्रोनाइज़ करें जहाँ आपका डेटा रहता है, उन सिस्टम्स के साथ जहाँ आप इसे रखना चाहते हैं।

SeaTunnel भारी डेटा (ऑफ़लाइन और वास्तविक समय) के सिंक्रनाइज़ेशन और रूपांतरण के लिए एक वितरित, उच्च-प्रदर्शन डेटा एकीकरण प्लेटफ़ॉर्म है।

डेटा एजेंट्स में प्रगति पर लगातार अपडेट की जाने वाली पेपर सूची। हमारे पेपर "A Survey of Data Agents: Emerging Paradigm or Overstated Hype?" की साथी रिपॉजिटरी

NicheNet: इंटरैक्टिंग कोशिकाओं के बीच सक्रिय लिगैंड-टारगेट लिंक की भविष्यवाणी करें

Harmony के साथ सिंगल-सेल डेटा का तेज़, संवेदनशील और सटीक एकीकरण

कंड्यूट डेटा स्टोर के बीच डेटा को स्ट्रीम करता है। Kafka Connect का विकल्प। किसी JVM की आवश्यकता नहीं है।

एनालिटिक्स प्लेटफॉर्म और डेटा इंजीनियरिंग इकोसिस्टम में उपयोग किए जाने वाले ओपन सोर्स टूल्स की एक क्यूरेटेड सूची

Apache Hudi से संबंधित जानकारी का संकलन।