bigdata

यह एक रेपो है जिसमें डेटा इंजीनियरिंग के बारे में वह सब कुछ सीखने के लिंक हैं जो आप कभी भी सीखना चाहते हैं।

🚀 4KB ऑब्जेक्ट पेलोड के लिए MinIO से 2.3x तेज़। RustFS एक ओपन-सोर्स, S3-संगत उच्च-प्रदर्शन ऑब्जेक्ट स्टोरेज सिस्टम है जो MinIO और Ceph जैसे अन्य S3-संगत प्लेटफार्मों के साथ माइग्रेशन और सह-अस्तित्व का समर्थन करता है।

औद्योगिक IoT (IIoT) परिदृश्यों के लिए डिज़ाइन किया गया उच्च-प्रदर्शन, स्केलेबल समय-श्रृंखला डेटाबेस

सभी डेटाबेस में शarding, स्केलेबिलिटी और सुरक्षा के लिए वितरित SQL के साथ डेटा इंटेलिजेंस को सशक्त बनाना।

बिग डेटा के लिए शुरुआती गाइड।

अद्भुत बिग डेटा फ्रेमवर्क, संसाधनों और अन्य शानदार चीज़ों की एक क्यूरेटेड सूची।

JuiceFS एक वितरित POSIX फ़ाइल सिस्टम है जो Redis और S3 के ऊपर बनाया गया है।

डेटा एजेंट रेडी वेयरहाउस: एनालिटिक्स, सर्च, AI, पाइथन सैंडबॉक्स के लिए — शुरुआत से पुनर्निर्मित। आपके S3 पर एकीकृत वास्तुकला।

Python, ML, विज़ुअलाइज़ेशन और प्रति सेकंड एक बिलियन पंक्तियों पर बड़े सारणीबद्ध डेटा की खोज के लिए आउट-ऑफ़-कोर हाइब्रिड Apache Arrow/NumPy DataFrame 🚀

बिग डेटा पर अपसर्ट, डिलीट और इंक्रीमेंटल प्रोसेसिंग।

एक क्लाउड नेटिव बैच सिस्टम (CNCF के तहत प्रोजेक्ट)

100+ बिग डेटा विज़ुअलाइज़ेशन कूल लार्ज स्क्रीन HTML5 टेम्पलेट्स; कम्युनिटी, प्रॉपर्टी, गवर्नमेंट अफेयर्स, ट्रांसपोर्टेशन, फाइनेंशियल बैंक आदि जैसे उद्योगों को कवर करना।

एक डेटा इंटीग्रेशन फ्रेमवर्क

🔨 JSON का उपयोग करके संरचित SQL स्टेटमेंट जनरेट करें, जो Vue3 + TypeScript + Vite + Ant Design + MonacoEditor के साथ कार्यान्वित है। प्रोजेक्ट सरल है (लॉजिक पर अधिक और यूआई पर कम ध्यान), अभ्यास के लिए उपयुक्त ~

Apache Avro एक डेटा सेरिएलाइजेशन सिस्टम है।

बिग डेटा लर्निंग, ज़ीरो से बिग डेटा सीखना, जिसमें बिग डेटा लर्निंग के विभिन्न चरणों के वीडियो और साक्षात्कार सामग्री शामिल हैं

GridDB एक अगली पीढ़ी का ओपन सोर्स डेटाबेस है जो समय-श्रृंखला IoT और बड़े डेटा को तेज़ और आसान बनाता है।

LangChain/LangGraph फ्रेमवर्क पर आधारित Aix-DB, MCP Skills मल्टी- एजेंट सहयोग आर्किटेक्चर के साथ मिलकर प्राकृतिक भाषा को डेटा इनसाइट्स में एंड-टू-एंड रूपांतरण प्राप्त करता है।

.NET for Apache® Spark™ .NET डेवलपर्स के लिए Apache Spark™ को आसानी से सुलभ बनाता है।

ओपन-सोर्स Flink पर आधारित, इसके रियल-टाइम SQL का विस्तार करता है; मुख्य रूप से स्ट्रीम और डायमेंशन टेबल के बीच जॉइन को लागू करता है, और मूल Flink SQL के सभी सिंटैक्स का समर्थन करता है

Byzer (पूर्व में MLSQL): डेटा पाइपलाइन, एनालिटिक्स और AI के लिए एक लो-कोड ओपन-सोर्स प्रोग्रामिंग भाषा।

बड़ा डेटा ज्ञान भंडार, डेटा वेयरहाउस मॉडलिंग, रियल-टाइम कंप्यूटिंग, बिग डेटा, डेटा मिड-एंड, सिस्टम डिज़ाइन, Java, एल्गोरिदम आदि से संबंधित है।

डिस्ट्रिब्यूटेड बिग डेटा ऑर्केस्ट्रेशन सर्विस

Google, Naver मल्टीप्रोसेस इमेज वेब क्रॉलर (Selenium)

बिग डेटा एनालिसिस और मशीन लर्निंग के लिए Apache Spark और Python (pySpark) ट्यूटोरियल IPython / Jupyter नोटबुक्स के रूप में

:truck: Pandas, Dask, cuDF, Dask-cuDF, Vaex और PySpark के साथ एगिले डेटा प्रिपरेशन वर्कफ़्लो को आसान बनाया गया

पहला ओपन-सोर्स डेटा डिस्कवरी और ऑब्ज़र्वेबिलिटी प्लेटफ़ॉर्म। हम डेटा प्रैक्टिशनर्स के जीवन को आसान बनाते हैं ताकि आप अपने व्यवसाय पर ध्यान केंद्रित कर सकें।

Apache Celeborn शफल और स्पिल्ड डेटा के लिए एक इलास्टिक और उच्च-प्रदर्शन वाली सेवा है

ClickHouse के लिए golang में डेटा सिंकिंग।

Apache Livy कहीं से भी Apache Spark के साथ इंटरैक्ट करने के लिए एक ओपन सोर्स REST इंटरफ़ेस है।