英语专用名词鉴别一些英文简写是字母符号混和,或是是数字数据混和,这一分词起來就无法依照空格符号那样切分了,针对字母符号混和的如 U.S.A 。 中文分词作用中文未登录词鉴别盘古分词能够对一些没有字典中的未登录词自动检索高频词优先选择盘古分词能够依据高频词来处理分词的分歧难题多元化分词盘古分词给予多种输出处理分词粒度分布和分词精密度衡量的难题中文姓名鉴别键入: “张三说确实确实理”分词結果:张三/说/的/的确/在理/键入 “李三购买了一张三角餐桌”分词結果:李三/买/了/一张/三角/餐桌/强制性一元分词键入 “张三说确实确实理”分词結果: 张(0,1)/张三(0,5)/三说的(1,盘古分词,1)/三(1,1)/说(2,5)/的(3,5)/确(4,1)/的确(4,5)/实(5,1)/在(6,1)/在理(6,5)/理(7,1) ...