vllm-project/llm-compressor
@vllm-projectThư viện tương thích với Transformers để áp dụng các thuật toán nén khác nhau cho LLM nhằm tối ưu hóa việc triển khai với vLLM
Sao
3.753
Fork
644
Ngôn ngữ
Python
Giấy phép
Apache-2.0
Push gần nhất
1 tuần trước
Intel liên quan (0)
Chưa có intel liên quan
Kho mã này chưa xuất hiện trong bất kỳ nguồn nào radar theo dõi. Bộ thu thập chạy theo lịch — hãy quay lại khi nó bao quát kho mã này.