跳到主要内容
buildradar
登录

xorbitsai/inference

@xorbitsai

只需更改一行代码,即可将 GPT 替换为任意 LLM。Xinference 让你在云端、本地或笔记本上运行开源、语音和多模态模型,统一的生产级推理 API

星数
9,537
Fork 数
865
语言
Python
许可
Apache-2.0
最后推送
1周前
Pythonmachine-learningllmvllmpytorchwhisperopenai-apiartificial-intelligenceqwentransformersinferenceglmllama-cppdeploymentkimigemmallamacppdiffuserssglangkimi-k3glm-5-3

还没有相关情报

radar 追踪的来源里还没有出现过这个 repo。收集器按计划运行——等它覆盖到这个 repo 再回来看看。