niieani/gpt-tokenizer
@niieaniDer schnellste JavaScript BPE Tokenizer Encoder Decoder für die GPT-Modelle von OpenAI (gpt-5, gpt-o*, gpt-4o etc.). Portierung von OpenAIs tiktoken mit zusätzlichen Funktionen.
Sterne
841
Forks
59
Sprache
TypeScript
Lizenz
MIT
Letzter Push
vor 4 Wochen
Verwandte Intel (0)
Noch keine verwandte Intel
Dieses Repo ist noch in keiner der vom Radar verfolgten Quellen aufgetaucht. Der Collector läuft nach Zeitplan — schau wieder vorbei, sobald er dieses Repo abdeckt.