CNWD:Chinese New Word Discover(无监督，中文新词发现)
概述
1.本程序用于中文新词发现。不依赖于已有词典、词库，输入中文文本，即可发现中文新词，属非监督式学习。
2.本程序支持中文2字新词、3字新词和4字新词的发现。
3.需要python3及以上。
算法参考
基于大规模语料的新词发现算法，顾森，《程序员》
不过，在顾森文章中提及的次数阈值、凝固度阈值、信息熵阈值是实数值，本程序支持基于统计的比值。
本程序，次数阈值、凝固度阈值、信息熵阈值参数设置分别为-c、-b、-e(统计比值)，-C、-B、-E(实数值)。
使用
cnwd.py Input Output [options]
options:
-c CountThresholdPercent,(0,1),default=0.5
-C CountThreshold
-b BindThresholdPercent,(0,1),default=0.5
-B BindThreshol
文件下载
资源详情
[{"title":"（ 5 个子文件 2.28MB ） CNWD:Chinese New Word Discover(无监督，中文新词发现)","children":[{"title":"CNWD-master","children":[{"title":"cnwd.py <span style='color:#111;'> 8.12KB </span>","children":null,"spread":false},{"title":"LICENSE <span style='color:#111;'> 1.04KB </span>","children":null,"spread":false},{"title":"TestData <span style='color:#111;'> 5.23MB </span>","children":null,"spread":false},{"title":".gitignore <span style='color:#111;'> 1.13KB </span>","children":null,"spread":false},{"title":"README.md <span style='color:#111;'> 1.42KB </span>","children":null,"spread":false}],"spread":true}],"spread":true}]
评论信息
其他资源
- MAC 锐捷客户端（校园网）
- 微信小程序申请书模板
- 郑州大学VB.NET复习资料经典例题及知识点总结
- 相空间重构matlab程序
- 粒子群算法解决企业生产调度问题matlab源程序
- MQTT消息队列mosquitto的java方式实现客户端订阅
- 你没有的food_info.csv文件
- Nonlinear Control-Khalil
- 全国城市、商圈、地铁线、站、携程酒店、城市数据
- WebGis开发小实例
- Mstar屏参数设置说明.
- 初等概率论.英文第四版.钟开莱. 精美封面和目录
- TMS320C28X系列DSP指令和编程指南.pdf
- Release_x64 6.4.rar
- SwitchHosts.zip
- ThinkPHP高清问答系统视频教程附源码
- 个人网站asp+sql
- mysql5.0 jdbc 驱动
- java高校就业管理系统源码
- 工资管理系统
免责申明
【只为小站】的资源来自网友分享，仅供学习研究，请务必在下载后24小时内给予删除，不得用于其他任何用途，否则后果自负。基于互联网的特殊性，【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查；无论 【只为小站】 经营者是否已进行审查，用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二条之规定，若资源存在侵权或相关问题请联系本站客服人员，zhiweidada#qq.com，请把#换成@，本站将给予最大的支持与配合，做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明
本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二条之规定，若资源存在侵权或相关问题请联系本站客服人员，zhiweidada#qq.com，请把#换成@，本站将给予最大的支持与配合，做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明