openai/tiktoken
@openaitiktoken ist ein schneller BPE-Tokenisierer zur Verwendung mit den Modellen von OpenAI.
Sterne
19.148
Forks
1.606
Sprache
Python
Lizenz
MIT
Letzter Push
vor 3 Wochen
Verwandte Intel (0)
Noch keine verwandte Intel
Dieses Repo ist noch in keiner der vom Radar verfolgten Quellen aufgetaucht. Der Collector läuft nach Zeitplan — schau wieder vorbei, sobald er dieses Repo abdeckt.