niieani/gpt-tokenizer
@niieaniOpenAI の GPT モデル（gpt-5、gpt-o*、gpt-4o など）向けの最速 JavaScript BPE トークナイザー エンコーダー デコーダー。追加機能を備えた OpenAI の tiktoken の移植版。
スター
840
フォーク
59
言語
TypeScript
ライセンス
MIT
最終プッシュ
4 週間前
関連 Intel（0）
関連 Intel はまだありません
このリポジトリは radar が追跡するソースにまだ登場していません。コレクターはスケジュールで動いています——このリポジトリがカバーされたらまた見てください。