niieani/gpt-tokenizer
@niieaniLe tokenizer, encodeur et décodeur BPE JavaScript le plus rapide pour les modèles GPT d'OpenAI (gpt-5, gpt-o*, gpt-4o, etc.). Portage de tiktoken d'OpenAI avec des fonctionnalités supplémentaires.
Étoiles
840
Bifurcations
59
Langage
TypeScript
Licence
MIT
Dernier push
il y a 4 semaines
Intel associée (0)
Aucune intel associée pour le moment
Ce dépôt n'est encore apparu dans aucune des sources que le radar suit. Le collecteur suit un calendrier — revenez une fois qu'il couvre ce dépôt.