data-engineering

SQL Translator कृत्रिम बुद्धिमत्ता का उपयोग करके प्राकृतिक भाषा के प्रश्नों को SQL कोड में बदलने का एक टूल है। यह प्रोजेक्ट 100% मुफ़्त और ओपन सोर्स है।

AWS पर pandas - Athena, Glue, Redshift, S3 और अन्य के साथ आसान एकीकरण।

शुरुआत से डेटा इंजीनियरिंग सीखने के लिए उपयोगी संसाधनों की सूची

Maestro: Netflix का वर्कफ़्लो ऑर्केस्ट्रेटर

अत्यधिक तेज़ डेटा-रैंगलिंग टूलकिट

Memphis.dev एक अत्यधिक स्केलेबल और सहज डेटा स्ट्रीमिंग प्लेटफॉर्म है

production-grade ML एप्लिकेशन को डिज़ाइन, विकसित, तैनात और पुनरावृत्ति करना सीखें।

Rust में लिखा गया ड्रॉप-इन Apache Spark रिप्लेसमेंट, जो बैच प्रोसेसिंग, स्ट्रीम प्रोसेसिंग और कंप्यूट-इंटेंसिव AI वर्कलोड को एकजुट करता है।

ओपन-सोर्स डेटा इंजीनियरिंग प्रोजेक्ट्स की एक शानदार सूची

Apache DevLake एक ओपन-सोर्स देव डेटा प्लेटफ़ॉर्म है, जो DevOps टूल से खंडित डेटा को एकत्र, विश्लेषित और विज़ुअलाइज़ करता है, जिससे इंजीनियरिंग उत्कृष्टता, डेवलपर अनुभव और कम्युनिटी ग्रोथ के लिए इनसाइट्स निकाले जाते हैं।

LLM, एजेंट, RAG, फाइन-ट्यूनिंग, LLMOps और AI सिस्टम तकनीकों के साथ अपना सेकंड ब्रेन AI असिस्टेंट बनाना सीखें।

Meltano: डिक्लेरेटिव कोड-फर्स्ट डेटा इंटीग्रेशन इंजन जो आपके सबसे साहसी डेटा और ML-संचालित उत्पाद विचारों को शक्ति प्रदान करता है। अपने खुद के API इंटीग्रेशन को लिखने, बनाए रखने और स्केल करने को अलविदा कहें।

Apache Hamilton डेटा वैज्ञानिकों और इंजीनियरों को परीक्षण योग्य, मॉड्यूलर, स्व-दस्तावेज़ीकरण डेटाफ़्लो को परिभाषित करने में मदद करता है, जो वंशावली/ट्रेसिंग और मेटाडेटा को एनकोड करते हैं। जहाँ भी Python चलता है, यह हर जगह चलता और स्केल करता है।

RAG के लिए एक नया SOTA — मनुष्यों और एजेंटों के लिए एक मूल पुनर्प्राप्ति वास्तुकला और ओपन-सोर्स ज्ञान आधार।

लेखों, लिस्टिंग, खोज परिणामों और अनुशंसाओं के लिए एक लो-कोड मशीन लर्निंग वैयक्तिकृत रैंकिंग सेवा जो उपयोगकर्ता की व्यस्तता को बढ़ाती है। एक अनुकूल Learn-to-Rank इंजन

आधुनिक डेटा स्टैक के लिए डेटा कॉन्ट्रैक्ट्स इंजन। https://www.soda.io

Datart अगली पीढ़ी का डेटा विज़ुअलाइज़ेशन ओपन प्लेटफ़ॉर्म है

Python स्ट्रीम प्रोसेसिंग।

डेटा इंजीनियरिंग सीखने के लिए सबसे अच्छी जगह। डेटा इंजीनियरिंग कम्युनिटी द्वारा निर्मित और अनुरक्षित।

Feathr – उद्यमों के लिए एक स्केलेबल, एकीकृत डेटा और AI इंजीनियरिंग प्लेटफॉर्म

अद्भुत dbt संसाधनों की एक क्यूरेटेड सूची

2000 से अधिक डेटा इंजीनियर साक्षात्कार प्रश्न।

MLRun एक ओपन सोर्स MLOps प्लेटफ़ॉर्म है जो अपने जीवनचक्र में निरंतर ML अनुप्रयोगों को तेज़ी से बनाने और प्रबंधित करने के लिए है। MLRun आपके विकास और CI/CD वातावरण में एकीकृत होता है और उत्पादन डेटा, ML पाइपलाइन और ऑनलाइन अनुप्रयोगों की डिलीवरी को स्वचालित करता है।

🔥🔥🔥 ओपन सोर्स रिवर्स ETL - hightouch और census का विकल्प।

डेटा साइंस, डेटा इंजीनियरिंग, मशीन लर्निंग, डीप लर्निंग, कंप्यूटर साइंस, प्रोग्रामिंग, सॉफ्टवेयर इंजीनियरिंग आदि के लिए 180+ YouTube चैनलों की एक व्यापक सूची।

👾 nao एक ओपन सोर्स एनालिटिक्स एजेंट है। (1) nao-core cli के साथ संदर्भ बनाएं, (2) सभी के लिए nao चैट इंटरफ़ेस तैनात करें

:bar_chart: :clipboard: YAML या JSON फ़ाइलों का उपयोग करने वाले डैशबोर्ड

ktx डेटा और एनालिटिक्स एजेंटों के लिए एक निष्पादन योग्य संदर्भ परत है 🐙 Claude Code, Codex, या अन्य AI एजेंटों को आपकी कंपनी के पूर्ण संदर्भ के साथ सटीक रूप से विश्लेषणात्मक डेटाबेस को क्वेरी करने की अनुमति दें

Kafka के लिए Python स्ट्रीमिंग DataFrames

कॉन्करेंट Python को सरल बनाया गया