BPE Tokenizer “连连看”

玩法说明:寻找全局出现频次最高的相邻 Token, 点击相邻的两个卡片将它们合并!
[2026秋季学期, NLP课程, liujiehai@nuist.edu.cn]
0
得分 (Score)
0
连击 (Combo)
0
剩余高频对
💡 提示:右侧列表会提示当前出现次数最多的 Pair,找出并在左侧连续点击它们合成新 Token!

游戏文本区域(点击相邻 Token 合并)

已解锁的 Token 词表 (Vocabulary)

Pair 频次雷达(最佳目标)