Shi Zhuolin's Blog

准备分词词表，将待分词语句按从左到右的切分顺序与词表匹配，查找到的最长词语为分词结果，并且当前切分位置为下个词语切分开始位置，如切分片段在在词表中无对应词语，则顺移到待切分语句下一个字继续切分，把跳过的片段切分为独立词语