基于词语条件信息量的新词发现被引量：1

在线阅读下载PDF

导出

摘要随着互联网用户群体的不断发展,每天都会有海量的文本产生,会产生很多新词,本文提出一种基于词语信息量特征的新词发现方法,使用CRF(条件随机场)进行新词发现的实验,测试中,实验结果表明取得一定的效果。

作者梁韬张瑞

机构地区湖南工业大学计算机与通信学院

出处《电子技术与软件工程》 2014年第11期180-181,共2页 ELECTRONIC TECHNOLOGY & SOFTWARE ENGINEERING

基金国家自然科学基金项目(61170102) 湖南省自然科学基金项目(11JJ3070) 湖南科技发展项目(2011GK3145)

关键词新词发现条件信息量条件随机场

分类号 TP391.1 [自动化与计算机技术—计算机应用技术]

作者简介梁韬（1989-），男，安徽省合肥市人．硕士研究生学历。主要研究方向为中文新词发现。

引文网络
相关文献

参考文献3

1罗智勇,宋柔.基于多特征的自适应新词识别[J].北京工业大学学报,2007,33(7):718-725. 被引量：14
2聂颂,何丕廉,孙越恒.统计与规则结合的一种新词识别方法[J].微型机与应用,2003,22(10):58-60. 被引量：5
3郑家恒,李文花.基于构词法的网络新词自动识别初探[J].山西大学学报（自然科学版）,2002,25(2):115-119. 被引量：56

二级参考文献21

1郑家恒李文花.新词语自动识别方法研究.自然语言理解与机器翻译[M].北京:清华大学出版社,2001..
2陆志苇.现代汉语构词法（修订本）[M].北京:中华书局,1975..
3郑家恒李文花.新词语自动识别方法研究[A]..自然语言理解与机器翻译[C].北京:清华大学出版社,2001..
4郑家恒李文花自然语言理解与机器翻译.新词语自动识别方法研究[M].北京:清华大学出版社,2001..
5刘开线.中文文本自动分词和标注[M].北京：商务印书馆,2000..
6国怀林.论新词语的确定[C]//南开大学《语言学论辑》编辑委员会.语言学论辑.北京:北京语言学院出版社,1996:98-129.
7LI Hong-qiao,HUANG Chang-ning,GAO Jian-feng,et al.The use of SVM for chinese new word identification[C]//NI Guan-nan,TSOU Jia-yan.Proceedings of First International Joint Conference on Natural Language Processing.Sanya:Soringer,2004:497-504.
8CHIEN Lee-feng.PAT-tree-based keyword extraction for chinese information retrieval[C]//Proceedings of the ACM SIGIR International Conference on Information Retrieval.Philadelphia,PA:ACM,1997:50-59.
9SMADJA F.Retrieving collocations from text:xtract[J].Computational Linguistics,1993,19(1):143-177.
10CHIEN Lee-feng.PAT-tree-based adaptive key phrase extraction for intelligent chinese information retrieval[J].Information Process and Management,1999,35(4):501-521.

共引文献67

1黄东平,田芳.BBS信息过滤技术研究[J].长江大学学报（自然科学版）,2004,1(1):16-18. 被引量：4
2王源媛,何中市.基于词性探测的中文姓名识别算法[J].计算机科学,2005,32(4):84-86. 被引量：2
3周文刚,王景中.基于语义的信息过滤算法的设计与实现[J].周口师范学院学报,2006,23(2):96-100. 被引量：3
4崔世起,刘群,孟遥,于浩,西野文人.基于大规模语料库的新词检测[J].计算机研究与发展,2006,43(5):927-932. 被引量：32
5刘华.一种快速获取领域新词语的新方法[J].中文信息学报,2006,20(5):17-23. 被引量：14
6任禾,曾隽芳.一种基于信息熵的中文高频词抽取算法[J].中文信息学报,2006,20(5):40-43. 被引量：22
7李新福,赵杰,梁巍.基于互信息的宋史语料库词表的提取[J].河北大学学报（自然科学版）,2006,26(5):557-560. 被引量：4
8张辉丽,孟昭鹏,王慧芝.汉语自动分词中的歧义处理[J].微计算机应用,2006,27(6):685-688. 被引量：3
9吕学强,黄河,李渝勤,施水才.BBS中文新词语自动挖掘[J].现代图书情报技术,2007(1):37-39. 被引量：2
10夏霙,刘功申,李翔.基于标引信息的网络新概念发现算法[J].微型电脑应用,2007,23(1):8-10.

同被引文献12

1邹纲,刘洋,刘群,孟遥,于浩,西野文人,亢世勇.面向Internet的中文新词语检测[J].中文信息学报,2004,18(6):1-9. 被引量：60
2陈飞,刘奕群,魏超,张云亮,张敏,马少平.基于条件随机场方法的开放领域新词发现[J].软件学报,2013,24(5):1051-1060. 被引量：45
3郑家恒,李文花.基于构词法的网络新词自动识别初探[J].山西大学学报（自然科学版）,2002,25(2):115-119. 被引量：56
4唐波,陈光,王星雅,王非,陈小慧.微博新词发现及情感倾向判断分析[J].山东大学学报（理学版）,2015,50(1):20-25. 被引量：8
5周超,严馨,余正涛,洪旭东,线岩团.融合词频特性及邻接变化数的微博新词识别[J].山东大学学报（理学版）,2015,50(3):6-10. 被引量：11
6李文坤,张仰森,陈若愚.基于词内部结合度和边界自由度的新词发现[J].计算机应用研究,2015,32(8):2302-2304. 被引量：37
7孙立远,周亚东,管晓宏.利用信息传播特性的中文网络新词发现方法[J].西安交通大学学报,2015,49(12):59-64. 被引量：5
8夭荣朋,许国艳,宋健.基于改进互信息和邻接熵的微博新词发现方法[J].计算机应用,2016,36(10):2772-2776. 被引量：26
9雷一鸣,刘勇,霍华.面向网络语言基于微博语料的新词发现方法[J].计算机工程与设计,2017,38(3):789-794. 被引量：11
10周霜霜,徐金安,陈钰枫,张玉洁.融合规则与统计的微博新词发现方法[J].计算机应用,2017,37(4):1044-1050. 被引量：16

引证文献1

1王欣.一种基于多字互信息与邻接熵的改进新词合成算法[J].现代计算机（中旬刊）,2018(4):7-11. 被引量：5

二级引证文献5

1李筱瑜.基于新词发现与词典信息的古籍文本分词研究[J].软件导刊,2019,18(4):60-63. 被引量：6
2曹帅.结合关联置信度与结巴分词的新词发现算法[J].计算机系统应用,2020,29(5):144-151. 被引量：5
3金宇杰,袁明.基于TF-IDF算法的新词发现系统原理与实现[J].信息化研究,2020,46(5):39-44. 被引量：6
4王巍洁,任慧玲,李晓瑛,王勖,张颖.融合汉字多语义与文本统计特征的中文医学新词发现研究[J].图书情报工作,2024,68(6):119-128. 被引量：3
5刘文平,李艳春,张贺,张宇驰,丁鼎,于泉,王传炀.基于TF-IDF和jieba分词的交通运输综合执法语音文件和文本文件关联匹配技术[J].交通技术,2023,12(5):377-384.

1黄兵,周献中,张蓉蓉.基于信息量的不完备信息系统属性约简[J].系统工程理论与实践,2005,25(4):55-60. 被引量：41
2聂冰,李文,郭永香.基于粗糙集理论的决策系统属性约简[J].大连交通大学学报,2008,29(4):76-78. 被引量：1
3林毓宁,冼太生,桂现才.基于条件信息量的决策表连续属性离散化算法[J].洛阳师范学院学报,2006,25(2):14-16.
4钱进,叶飞跃,孟祥萍,刘大有.一种基于新的条件信息量的属性约简算法[J].系统工程与电子技术,2007,29(12):2154-2157. 被引量：9
5桂现才,彭宏.决策表属性约简及其条件信息量表示[J].计算机工程与应用,2006,42(14):197-199. 被引量：7
6赵雪芬.基于条件信息量的教学质量评价[J].西安文理学院学报（自然科学版）,2013,16(1):67-70. 被引量：3
7林镇飚,桂现才.粗糙集理论中决策表属性约简的信息量表示[J].广西师范学院学报（自然科学版）,2005,22(2):35-38. 被引量：4
8李体政,高红星.基于条件信息量一致决策表的属性约简[J].纺织高校基础科学学报,2005,18(1):83-86.
9周献中,黄兵.基于粗集的不完备信息系统属性约简[J].南京理工大学学报,2003,27(5):630-635. 被引量：26
10刘山,张慧.基于条件信息量的动态属性约简方法[J].计算机工程,2007,33(11):182-183. 被引量：4

电子技术与软件工程

2014年第11期

浏览历史

内容加载中请稍等...

基于词语条件信息量的新词发现被引量：1

参考文献3

二级参考文献21

共引文献67

同被引文献12

引证文献1

二级引证文献5

相关作者

相关机构

相关主题

浏览历史

基于词语条件信息量的新词发现 被引量：1

参考文献3

二级参考文献21

共引文献67

同被引文献12

引证文献1

二级引证文献5

相关作者

相关机构

相关主题

浏览历史

基于词语条件信息量的新词发现被引量：1