niieani/gpt-tokenizer
@niieaniO codificador e decodificador BPE Tokenizer em JavaScript mais rápido para os modelos GPT da OpenAI (gpt-5, gpt-o*, gpt-4o, etc.). Versão portada do tiktoken da OpenAI com recursos adicionais.
Estrelas
841
Bifurcações
59
Linguagem
TypeScript
Licença
MIT
Último push
há 4 semanas
Intel relacionado (0)
Ainda não há intel relacionado
Este repo ainda não apareceu em nenhuma das fontes que o radar rastreia. O coletor roda em um cronograma — volte quando ele cobrir este repo.