基于双向匹配法和特征选择算法的中文分词技术研究
来源期刊:昆明理工大学学报(自然科学版)2011年第1期
论文作者:麦范金 李东普 岳晓光
文章页码:47 - 51
关键词:双向最大匹配;特征选择算法;中文分词;
摘 要:传统的双向匹配算法虽然能够发现歧义现象,但是却不能解决歧义问题.为了更好地进行歧义消解,提出了一种基于双向匹配法和特征选择算法的中文分词技术,通过积累的语料库,设计并实现了一个基于两种方法的分词系统.该系统的实验结果表明,基于双向匹配法和特征选择算法的中文分词技术比传统方法的效果要好.
麦范金1,李东普2,岳晓光3
1. 桂林理工大学图书馆2. 桂林理工大学信息科学与工程学院3. 广西民族师范学院数学与计算机科学系
摘 要:传统的双向匹配算法虽然能够发现歧义现象,但是却不能解决歧义问题.为了更好地进行歧义消解,提出了一种基于双向匹配法和特征选择算法的中文分词技术,通过积累的语料库,设计并实现了一个基于两种方法的分词系统.该系统的实验结果表明,基于双向匹配法和特征选择算法的中文分词技术比传统方法的效果要好.
关键词:双向最大匹配;特征选择算法;中文分词;