评价一个分词器分词结果的好坏,
必然要有一份“公认正确”的分词结果数据来作为参照。
通常,我们使用一份人工标注的数据作为黄金标准。
但是,就算是人工标注的数据,
每个人对同一句话的分词,
结果恐怕也持有不同的意见,……。