nlp

GPT/LLM एजेंट्स बनाने और तैनात करने के लिए ओपन-सोर्स हब ⚡️

मॉडलों द्वारा आयोजित अत्याधुनिक Deep Learning स्क्रिप्ट - एंटरप्राइज़-ग्रेड बुनियादी ढांचे पर पुनरुत्पादित सटीकता और प्रदर्शन के साथ प्रशिक्षित और तैनात करने में आसान।

NLTK सोर्स

अत्याधुनिक नेचुरल लैंग्वेज प्रोसेसिंग (NLP) के लिए एक बहुत ही सरल फ्रेमवर्क

आर्टिफिशियल इंटेलिजेंस लर्निंग रोडमैप, जिसमें लगभग 200 व्यावहारिक केस स्टडीज और प्रोजेक्ट्स शामिल हैं। मुफ्त सहायक सामग्री के साथ, शून्य से शुरुआत करने वालों के लिए उपयुक्त! इसमें Python, गणित, मशीन लर्निंग, डेटा विश्लेषण, डीप लर्निंग, कंप्यूटर विज़न, नेचुरल लैंग्वेज प्रोसेसिंग, PyTorch, TensorFlow और अन्य लोकप्रिय क्षेत्र शामिल हैं।

🔥 हर हफ्ते शीर्ष ML पेपर को हाइलाइट करना।

शानदार मॉडल ज़ू के साथ उपयोग में आसान और शक्तिशाली LLM और SLM लाइब्रेरी।

सिमेंटिक सर्च, LLM ऑर्केस्ट्रेशन और लैंग्वेज मॉडल वर्कफ़्लो के लिए ऑल-इन-वन AI फ्रेमवर्क

सामान्य नेचुरल-लैंग्वेज प्रोसेसिंग

अनुसंधान और उत्पादन के लिए अनुकूलित तेज़ अत्याधुनिक टोकनराइज़र

OpenVINO™ AI इन्फरेंस को ऑप्टिमाइज़ और डिप्लॉय करने के लिए एक ओपन सोर्स टूलकिट है।

टेक्स्ट, इमेज और संरचित डेटा में संवेदनशील डेटा (PII) का पता लगाने, उसे हटाने, मास्क करने और अज्ञात बनाने के लिए एक ओपन-सोर्स फ़्रेमवर्क। NLP, पैटर्न मिलान और अनुकूलन योग्य पाइपलाइन का समर्थन करता है।

🌸 BitTorrent-शैली में घर पर LLMs चलाएं। ऑफलोडिंग की तुलना में 10 गुना तक तेज़ फाइन-ट्यूनिंग और इन्फेरेंस।

चीनी BERT के लिए होल वर्ड माaskिंग के साथ प्री-ट्रेनिंग (चीनी BERT-wwm श्रृंखला मॉडल)

LLM के व्यावहारिक गाइड संसाधनों की एक क्यूरेटेड सूची (LLM ट्री, उदाहरण, पेपर)।

CoreNLP: टोकनाइजेशन, वाक्य विभाजन, NER, पार्सिंग, कोरफेरेंस, सेंटीमेंट एनालिसिस आदि के लिए कोर NLP टूल्स का एक Java सूट।

NLP के लिए बड़े पैमाने पर चीनी भाषा का कॉर्पस

"Attention is All You Need" में दिए गए Transformer मॉडल का PyTorch कार्यान्वयन।

सरल, पायथोनिक, टेक्स्ट प्रोसेसिंग - सेंटीमेंट एनालिसिस, पार्ट-ऑफ-स्पीच टैगिंग, नाउन फ्रेज एक्सट्रैक्शन, ट्रांसलेशन और बहुत कुछ।

ModelScope: Model-as-a-Service की अवधारणा को साकार करना।

Zhiheng Xi et al. द्वारा 86-पृष्ठ के SCIS कवर पेपर "The Rise and Potential of Large Language Model Based Agents: A Survey" की पेपर सूची।

BertViz: Transformer मॉडल में अटेंशन को विज़ुअलाइज़ करें

टोकनाइज़ेशन, सेंटेंस सेगमेंटेशन, NER और कई मानव भाषाओं की पार्सिंग के लिए Stanford NLP Python लाइब्रेरी।

आसानी से समझने योग्य टॉपिक्स बनाने के लिए BERT और c-TF-IDF का उपयोग।

BERT टोकनराइज़र का उपयोग करके GPT2 प्रशिक्षण कोड का चीनी संस्करण।

गणित, कंप्यूटिंग और ML को अंतर्ज्ञान के साथ कवर करने वाली इस अपरंपरागत पाठ्यपुस्तक के साथ एक बेहतरीन AI/ML शोधकर्ता/इंजीनियर बनें।

चाइनीज LLaMA-2 और Alpaca-2 LLM दूसरा चरण प्रोजेक्ट + 64K लॉन्ग कॉन्टेक्स्ट मॉडल (Chinese LLaMA-2 & Alpaca-2 LLMs with 64K long context models)

डीप लर्निंग एंड-टू-एंड डायलॉग सिस्टम और चैटबॉट के लिए एक ओपन सोर्स लाइब्रेरी।

जो चीजें मैं सीख रहा हूँ उनका एक लॉग

आधिकारिक तौर पर बनाए रखा गया, PaddlePaddle द्वारा समर्थित, जिसमें CV, NLP, Speech, Rec, TS, बड़े मॉडल आदि शामिल हैं।