资料介绍
为提高中文分词的准确率和未登录词( OOV)识别率,提出了一种基于字表示学习方法的中文分词系统。首先使用Skip-gram模型将文本中的词映射为高维向量空间中的向量;其次用K-means聚类算法将词向量聚类,并将聚类结果作为条件随机场(CRF)模型的特征进行训练;最后基于该语言模型进行分词和未登录词识别。对词向量的维数、聚类数及不同聚类算法对分词的影响进行了分析。基于第四届自然语言处理与中文计算会议( NLPCC2015)提供的微博评测语料进行测试,实验结果表明,在未利用外部知识的条件下,分词的F值和OOV识别率分别达到95. 67%和94. 78%,证明了将字的聚类特征加入到条件随机场模型中能有效提高中文短文本的分词性能。
下载该资料的人也在下载
下载该资料的人还在阅读
更多 >
- 面向异质信息的网络表示学习方法综述 13次下载
- 基于脑电信号扫视轨迹的异质迁移学习方法 12次下载
- 基于变分自编码器的网络表示学习方法 27次下载
- 一种基于块对角化表示的多视角字典对学习方法 1次下载
- 一种针对有向网络表示学习的优化方法 10次下载
- 基于异质网络层次的基因节点表示学习方法 5次下载
- 一种结合属性信息的二分网络表示学习方法 13次下载
- 最红编程语言Python的入门学习方法资料概述 18次下载
- 缅甸语分词方法及其实现方法来开发缅甸语的语音合成系统 0次下载
- 一种融合节点先验信息的图表示学习方法 0次下载
- 基于SQL Server的中文分词系统设计及应用 2708次下载
- ZigBee 简介和学习方法 14次下载
- [学习嵌入式]嵌入式系统学习方法,轻松入门嵌入式 79次下载
- 第1章 ZigBee简介和学习方法 8次下载
- 模拟电子电路的学习方法
- 深度学习中的无监督学习方法综述 202次阅读
- 改进版BERT——SpanBERT,通过表示和预测分词提升预训练效果! 8651次阅读
- SiATL——最新、最简易的迁移学习方法 3506次阅读
- 自然语言的语义表示学习方法与应用 7184次阅读
- 北大语言计算与机器学习研究组推出一套全新中文分词工具包pkuseg 3647次阅读
- 面向人工智能的机器学习方法体系总结 3307次阅读
- 机器学习入门宝典《统计学习方法》的介绍 4487次阅读
- 如何学好机器学习?机器学习的学习方法4个关键点整理概述 6148次阅读
- 第一种用于主动双目立体成像系统的深度学习方法 1w次阅读
- 斯坦福提出基于目标的策略强化学习方法——SOORL 5269次阅读
- 最接近人脑的智能学习方法深度学习,你了解多少? 4632次阅读
- 深度解析机器学习三类学习方法 1.4w次阅读
- 解析图像分类器结构搜索的正则化异步进化方法 并和强化学习方法进行对比 3629次阅读
- 模型驱动深度学习的标准流程与学习方法解析 4820次阅读
- 盘点变频器维修10种学习方法以及事例分析 6335次阅读
下载排行
本周
- 1电子电路原理第七版PDF电子教材免费下载
- 0.00 MB | 1490次下载 | 免费
- 2单片机典型实例介绍
- 18.19 MB | 93次下载 | 1 积分
- 3S7-200PLC编程实例详细资料
- 1.17 MB | 27次下载 | 1 积分
- 4笔记本电脑主板的元件识别和讲解说明
- 4.28 MB | 18次下载 | 4 积分
- 5开关电源原理及各功能电路详解
- 0.38 MB | 10次下载 | 免费
- 6基于AT89C2051/4051单片机编程器的实验
- 0.11 MB | 4次下载 | 免费
- 7基于单片机和 SG3525的程控开关电源设计
- 0.23 MB | 3次下载 | 免费
- 8基于单片机的红外风扇遥控
- 0.23 MB | 3次下载 | 免费
本月
- 1OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 2PADS 9.0 2009最新版 -下载
- 0.00 MB | 66304次下载 | 免费
- 3protel99下载protel99软件下载(中文版)
- 0.00 MB | 51209次下载 | 免费
- 4LabView 8.0 专业版下载 (3CD完整版)
- 0.00 MB | 51043次下载 | 免费
- 5555集成电路应用800例(新编版)
- 0.00 MB | 33562次下载 | 免费
- 6接口电路图大全
- 未知 | 30320次下载 | 免费
- 7Multisim 10下载Multisim 10 中文版
- 0.00 MB | 28588次下载 | 免费
- 8开关电源设计实例指南
- 未知 | 21539次下载 | 免费
总榜
- 1matlab软件下载入口
- 未知 | 935053次下载 | 免费
- 2protel99se软件下载(可英文版转中文版)
- 78.1 MB | 537791次下载 | 免费
- 3MATLAB 7.1 下载 (含软件介绍)
- 未知 | 420026次下载 | 免费
- 4OrCAD10.5下载OrCAD10.5中文版软件
- 0.00 MB | 234313次下载 | 免费
- 5Altium DXP2002下载入口
- 未知 | 233046次下载 | 免费
- 6电路仿真软件multisim 10.0免费下载
- 340992 | 191183次下载 | 免费
- 7十天学会AVR单片机与C语言视频教程 下载
- 158M | 183277次下载 | 免费
- 8proe5.0野火版下载(中文版免费下载)
- 未知 | 138039次下载 | 免费
评论
查看更多