基于N_gram模型解决分词歧义的中文分词算法被引量：2

在线阅读下载PDF

导出

摘要汉语分词是中文信息处理的基础。本文提出了一种利用N_gram模型处理最大匹配法分词中歧义的方法。首先找出正向最大匹配分词和逆向最大匹配分词结果不同的短语,然后利用N_gram模型对两个结果的概率进行计算,选取概率高的一组为最优结果。通过测试,该方法能够有效解决分词中的交集型歧义,具有较高的准确率。

作者冯伟

机构地区解放军外国语学院

出处《中国科技期刊数据库科研》 2017年第1期00087-00088,共2页

关键词中文分词 N-GRAM模型最大匹配法歧义消除

分类号 TP391.1 [自动化与计算机技术—计算机应用技术]

引文网络
相关文献

同被引文献16

1徐祖友.王云五与四角号码检字法[J].辞书研究,1990(6):128-134. 被引量：10
2马立东.Soundex语音匹配算法综述[J].现代计算机,2010,16(5):17-20. 被引量：3
3李文,洪亲,滕忠坚,石兆英,胡小丹,刘海博.基于n-gram的字符串分割技术的算法实现[J].计算机与现代化,2010(9):85-87. 被引量：6
4马立东.Metaphone语音匹配算法及其应用研究[J].计算机时代,2010(10):39-43. 被引量：2
5孙华,张航.汉字识别方法综述[J].计算机工程,2010,36(20):194-197. 被引量：28
6韩建国,巩军.面向物资分类的中文字符串相似度计算方法[J].情报学报,2012,31(7):709-714. 被引量：1
7周文德.现行汉字形近字分析[J].西南师范大学学报（人文社会科学版）,2000,26(3):125-129. 被引量：14
8严大治.字符串匹配算法比较与分析[J].计算机光盘软件与应用,2013,16(2):138-138. 被引量：2
9刘显敏,李建中.实体识别问题的相关研究[J].智能计算机与应用,2013,3(2):1-5. 被引量：7
10石跃祥,文华,龚平,莫浩澜,金银国.基于模糊神经网络的语义映射方法及其在自然图像检索中的应用[J].计算机科学,2013,40(12):122-126. 被引量：4

引证文献2

1陈鸣,杜庆治,邵玉斌,龙华.基于音形码的汉字相似度比对算法[J].信息技术,2018,42(11):73-75. 被引量：8
2周昊,沈庆宏.基于改进音形码的中文敏感词检测算法[J].南京大学学报（自然科学版）,2020,56(2):270-277. 被引量：13

二级引证文献17

1周昊,沈庆宏.基于改进音形码的中文敏感词检测算法[J].南京大学学报（自然科学版）,2020,56(2):270-277. 被引量：13
2徐思尧,周刚,杨强,谢善益,杨冬海,李兆坤.基于改进音型法的多系统电能质量数据整合[J].广东电力,2021,34(2):61-67. 被引量：3
3宋振,徐雅斌.社交网络中意见领袖的敏感舆论倾向识别[J].计算机工程与设计,2021,42(11):3293-3300. 被引量：1
4刘莹,杨超宇.融合有向图的文本敏感词过滤模型[J].绥化学院学报,2022,42(2):143-148. 被引量：2
5孟卓鹏,吴继冰,刘丽华,王懋,邓苏,黄宏斌.基于混合相似度度量的跨语言舰船实体匹配算法[J].郑州大学学报（理学版）,2022,54(4):12-19.
6徐扬,张嘉宝,杨满玉,李晶,聂云丽.MFCCs和DTW在拼音相似度中的研究[J].电脑知识与技术,2022,18(14):1-4. 被引量：1
7谭天,邵洚宇,司峥鸣.论基于人工智能的网络语言治理[J].媒体融合新观察,2022(3):15-21. 被引量：7
8王华敏,黄梦醒,冯文龙,冯思玲.基于改进音形码与HowNet的中文词相似度检测算法[J].计算机仿真,2022,39(8):460-465. 被引量：6
9徐翀,魏冠元,王冠群,刘紫熹,王其清,张炎.基于知识图谱的电网科技评审专家推荐方法研究[J].青海电力,2022,41(3):67-72. 被引量：1
10万金金,文屹,吕黔苏,张迅,范强,肖书舟,万云林.基于大数据深度挖掘电网设备缺陷体外循环的模型研制与应用[J].电力大数据,2023,26(3):61-68. 被引量：3

1纪波林.基于文本挖掘技术的网络舆情采集与分析应用研究[J].数字通信世界,2024(9):139-141.
2付尧明,陈余杰,侯宽新,蒋正.通航飞机维修文本故障数据的分词方法研究[J].计算机仿真,2025,42(1):30-35.
3梁霞,郭洁.基于在线评论的线上教学平台选择方法[J].山东大学学报（理学版）,2024,59(9):108-118.
4中国中文信息学会2024学术年会暨第三届全国大模型智能生成大会(CIPS-LMG2024)[J].中文信息学报,2024,38(11).
5任维.英语写作名词短语搭配辅导系统探究——基于N-gram模型[J].上海建桥学院学报,2025(1):25-28.
6王洁.从物性结构看《现代汉语词典》“安装”类释义元语言的分布与功能[J].安阳师范学院学报,2024,26(4):111-115.
7曩永慧.基于语言模型的小学语文易错字纠正与个性化学习系统分析[J].中国信息界,2025(1):218-220.

中国科技期刊数据库科研

2017年第1期

浏览历史

内容加载中请稍等...

基于N_gram模型解决分词歧义的中文分词算法被引量：2

同被引文献16

引证文献2

二级引证文献17

相关作者

相关机构

相关主题

浏览历史

基于N_gram模型解决分词歧义的中文分词算法 被引量：2

同被引文献16

引证文献2

二级引证文献17

相关作者

相关机构

相关主题

浏览历史

基于N_gram模型解决分词歧义的中文分词算法被引量：2