簡潔、乾淨的 Byte Pair Encoding(BPE)演算法實作,常用於 LLM 斷詞。
radar 追蹤的來源裡還沒有出現過這個 repo。收集器照排程執行——等它涵蓋到這個 repo 再回來看看。