karpathy/minbpe
@karpathyCódigo mínimo e limpo para o algoritmo Byte Pair Encoding (BPE) comumente usado na tokenização de LLM.
Estrelas
10.702
Bifurcações
1.094
Linguagem
Python
Licença
MIT
Último push
há 2 anos
Intel relacionado (0)
Ainda não há intel relacionado
Este repo ainda não apareceu em nenhuma das fontes que o radar rastreia. O coletor roda em um cronograma — volte quando ele cobrir este repo.