Repositori open source terpantau milik jmaczan, diurutkan berdasarkan bintang.
Bangun mesin inferensi LLM berkinerja tinggi Anda sendiri dalam C++ dan CUDA - versi yang lebih kecil dari vLLM.