Pular para o conteúdo principal
buildradar

b4rtaz/distributed-llama

@b4rtaz

Inferência de LLM distribuída. Conecte dispositivos domésticos em um cluster poderoso para acelerar a inferência de LLM. Mais dispositivos significam uma inferência mais rápida.

Stars
3.046
Forks
248
Language
C++
License
MIT
Last push
há 2 meses
C++llmllm-inferenceneural-networkllama3llmsllama2open-llmdistributed-computingdistributed-llm

No related intel yet

This repo has not appeared in any of the sources the radar tracks. The collector runs on a schedule — check back once it covers this repo.