मुख्य सामग्री पर जाएँ
buildradar
Sign in

ModelCloud/GPTQModel

@ModelCloud

Nvidia, AMD, Intel GPU और Intel/AMD/Apple CPU के लिए HF, vLLM और SGLang के माध्यम से HW एक्सीलरेशन समर्थन के साथ LLM मॉडल क्वांटाइजेशन (कंप्रेशन) टूलकिट।

स्टार
1,248
फ़ोर्क
205
भाषा
Python
लाइसेंस
NOASSERTION
आख़िरी push
6 दिन पहले
Pythonvllmtransformersquantizationsglangpeftoptimumgptq

अभी कोई संबंधित intel नहीं

यह रिपॉजिटरी radar द्वारा ट्रैक किए जाने वाले किसी भी स्रोत में अभी तक नहीं आई है। कलेक्टर एक शेड्यूल पर चलता है — जब यह इस रिपॉजिटरी को कवर करे तब वापस देखें।