基于互信息和邻接熵的新词发现算法
如何快速高效地识别新词是自然语言处理中一项非常重要的任务，针对当前新词发现存在的 问题，提出了一种从左至右逐字在未切词的微博语料中发现新词的算法。通过计算候选词语 与其右邻接字的互信息来逐字扩展，得到候选新词；并通过计算邻接熵、删除候选新词的首 尾停用词和过滤旧词语等方法来过滤候选新词，最终得到新词集。解决了因切词错误导致部 分新词无法识别以及通过 n-gram 方法导致大量重复词串和垃圾词串识别为新词的问题，最 后通过实验验证了该算法的有效性。
文件下载
评论信息
其他资源
- 将STM32内部Flash虚拟成U盘,通过复制bin文件实现程序升级。
- 程序设计实践-停车场管理系统
- unity3d材质球大全合集
- 蓝桥杯考试c/c++ 语言开发环境： ·Dev-cpp 5.4.0
- 基于Flask的留言板Demo
- 在线家教网毕业设计（基于Myeclipse设计用jsp实现，无错）
- BP神经网络详解与实例
- 2019年小猪o2o破解版源码v11.03生活通系统swoole-loader解密组件分享.zip
- Android之第三方平台实现QQ登录和QQ分享
- Correlative Filters for Convolutional Neural Networks
- 密码安全POS机开发EDMO板protel99SE设计硬件原理图+PCB文件.zip
- 中级数据库系统工程师下午试题模拟21.doc
- 微信公众账号大全微信导航源码
- JSky_4.0破解版
- 东南大学半导体物理考研真题哦
- MFC通过文件类型名获取文件图标列表
- C++实现内存修改器【CE】+1G视频教程百度云下载地址
- BMC socflash efi工具
- 会员管理系统之用户登陆和会员管理模块的设计与实现
- 实值编码遗传算法源程序.txt
免责申明
【只为小站】的资源来自网友分享，仅供学习研究，请务必在下载后24小时内给予删除，不得用于其他任何用途，否则后果自负。基于互联网的特殊性，【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查；无论 【只为小站】 经营者是否已进行审查，用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二条之规定，若资源存在侵权或相关问题请联系本站客服人员，zhiweidada#qq.com，请把#换成@，本站将给予最大的支持与配合，做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明
本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二条之规定，若资源存在侵权或相关问题请联系本站客服人员，zhiweidada#qq.com，请把#换成@，本站将给予最大的支持与配合，做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明