×

融合规则与统计的微博新词抽取方法

消耗积分:0 | 格式:rar | 大小:1.09 MB | 2017-12-04

分享资料个

　　结合微博新词的构词规则自由度大和极其复杂的特点，针对传统的C/NC-value方法抽取的结果新词边界的识别准确率不高，以及低频微博新词无法正确识别的问题，提出了一种融合人工启发式规则、C/NC -value改进算法和条件随机场（CRF）模型的微博新词抽取方法。一方面，人工启发式规则是指对微博新词的分类和归纳总结，并从微博新词构词的词性（POS）、字符类别和表意符号等角度设计的微博新词的构词规则；另一方面，改进的C/NC -value方法通过引入词频、邻接熵和互信息等统计量来重构NC-value目标函数，并使用CRF模型训练和识别新词，最终达到提高新词边界识别准确率和低频新词识别精度的目的。实验结果显示，与传统方法相比，所提出的方法能有效地提高微博新词识别的F值。

融合规则与统计的微博新词抽取方法

下载并关注上传者 低至0.43元/天 开通VIP 免费下载

声明：本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人，不代表电子发烧友网立场。文章及其配图仅供工程师学习之用，如有内容侵权或者其他违规问题，请联系本站处理。 举报投诉

评论(0)
发评论

下载排行榜

全部0条评论

快来发表一下你的评论吧 !