openai/tiktoken

tiktoken 是用於 OpenAI 模型的高速 BPE 分詞器

↗ 在 GitHub 開啟

星數

19,148

Fork 數

1,606

語言

Python

授權

MIT

最後推送

3 週前

還沒有相關情報

radar 追蹤的來源裡還沒有出現過這個 repo。收集器照排程執行——等它涵蓋到這個 repo 再回來看看。