karpathy/minbpe
@karpathyLLM टोकनाइज़ेशन में आमतौर पर उपयोग किए जाने वाले Byte Pair Encoding (BPE) एल्गोरिदम के लिए न्यूनतम और साफ कोड।
स्टार
10,702
फ़ोर्क
1,094
भाषा
Python
लाइसेंस
MIT
आख़िरी push
2 वर्ष पहले
संबंधित intel (0)
अभी कोई संबंधित intel नहीं
यह रिपॉजिटरी radar द्वारा ट्रैक किए जाने वाले किसी भी स्रोत में अभी तक नहीं आई है। कलेक्टर एक शेड्यूल पर चलता है — जब यह इस रिपॉजिटरी को कवर करे तब वापस देखें।