openai/tiktoken
@openaitiktoken est un tokeniseur BPE rapide conçu pour les modèles d'OpenAI.
Étoiles
19 148
Bifurcations
1 606
Langage
Python
Licence
MIT
Dernier push
il y a 3 semaines
Intel associée (0)
Aucune intel associée pour le moment
Ce dépôt n'est encore apparu dans aucune des sources que le radar suit. Le collecteur suit un calendrier — revenez une fois qu'il couvre ce dépôt.