apache-spark

एजेंट्स, LLMs और ML मॉडल के लिए ओपन सोर्स AI इंजीनियरिंग प्लेटफ़ॉर्म। MLflow सभी आकार की टीमों को लागत नियंत्रित करने और मॉडल व डेटा तक पहुँच प्रबंधित करते हुए उत्पादन-गुणवत्ता वाले AI अनुप्रयोगों को डीबग, मूल्यांकन, मॉनिटर और अनुकूलित करने में सक्षम बनाता है।

lakeFS - आपके डेटा लेक के लिए डेटा वर्शन कंट्रोल | डेटा के लिए Git

Spark के लिए ML एल्गोरिदम पोर्ट करने वाली सरल और वितरित मशीन लर्निंग Python लाइब्रेरी

Rust में लिखा गया ड्रॉप-इन Apache Spark रिप्लेसमेंट, जो बैच प्रोसेसिंग, स्ट्रीम प्रोसेसिंग और कंप्यूट-इंटेंसिव AI वर्कलोड को एकजुट करता है।

Kubernetes पर Apache Spark अनुप्रयोगों के जीवनचक्र को प्रबंधित करने के लिए Kubernetes ऑपरेटर।

.NET for Apache® Spark™ .NET डेवलपर्स के लिए Apache Spark™ को आसानी से सुलभ बनाता है।

Apache Spark डॉकर इमेज

Feathr – उद्यमों के लिए एक स्केलेबल, एकीकृत डेटा और AI इंजीनियरिंग प्लेटफॉर्म

शानदार Apache Spark पैकेज और संसाधनों की एक क्यूरेटेड सूची।

Apache Spark की आंतरिक संरचना

यह Learning Spark: Lightning-Fast Data Analytics [2nd Edition] के लिए गिटहब रेपो है

GraphFrames, Apache Spark के लिए एक पैकेज है जो DataFrame-आधारित Graphs प्रदान करता है

डेटा एल्गोरिदम बुक के लिए MapReduce, Spark, Java और Scala

Apache Spark के लिए R इंटरफ़ेस

Apache Spark के लिए C# और F# भाषा बाइंडिंग और एक्सटेंशन।

पूरी तरह से प्रबंधित Apache Parquet कार्यान्वयन

इस रिपॉजिटरी में sparkMeasure के लिए विकास कोड है, जो एक Apache Spark प्रदर्शन विश्लेषण और समस्या निवारण लाइब्रेरी है। यह स्पार्क टास्क/स्टेज मेट्रिक्स को एकत्र करने, समेकित करने और निर्यात करने को सरल बनाता है, और इंटरैक्टिव विश्लेषण, परीक्षण और उत्पादन निगरानी वर्कफ़्लो में डेवलपर्स और डेटा इंजीनियरों द्वारा व्यावहारिक उपयोग के लिए डिज़ाइन किया गया है।

डेवलपर उत्पादकता बढ़ाने के लिए pyspark मेथड्स

Apache Spark क्लस्टर लॉन्च करने के लिए एक कमांड-लाइन टूल।

Apache Kafka के बारे में एक सूची।

Scikit-Learn, R और Apache Spark मॉडल की वास्तविक समय में स्कोरिंग (<1 ms) के लिए REST वेब सर्विस