WordSeg:BiLSTM \ BERT \ Roberta(+ CRF)模型的PyTorch实现,用于中文分词-源码

上传者: 42180863 | 上传时间: 2021-05-07 19:47:06 | 文件大小: 15KB | 文件类型: ZIP
中文分词 本项目为中文分词任务baseline的代码实现,模型包括 BiLSTM-CRF 基于BERT的+ X(softmax / CRF / BiLSTM + CRF) 罗伯塔+ X(softmax / CRF / BiLSTM + CRF) 本项目是的项目。 数据集 数据集第二届中文分词任务中的北京大学数据集。 模型 本项目实现了中文分词任务的baseline模型,对应路径分别为: BiLSTM-CRF BERT-Softmax BERT-CRF BERT-LSTM-CRF 其中,根据使用的预训练模型的不同,BERT-base-X模型可转换为Roberta-X模型。 要求 此仓库已在Python 3.6+和PyTorch 1.5.1上进行了测试。 主要要求是: tqdm scikit学习 火炬> = 1.5.1 :hugging_face: 变压器== 2.2.2 要解决环境问题,请运行:

文件下载

资源详情

[{"title":"( 19 个子文件 15KB ) WordSeg:BiLSTM \\ BERT \\ Roberta(+ CRF)模型的PyTorch实现,用于中文分词-源码","children":[{"title":"WordSeg-main","children":[{"title":"readme.md <span style='color:#111;'> 2.07KB </span>","children":null,"spread":false},{"title":"BiLSTM-CRF","children":[{"title":"Vocabulary.py <span style='color:#111;'> 2.72KB </span>","children":null,"spread":false},{"title":"utils.py <span style='color:#111;'> 899B </span>","children":null,"spread":false},{"title":"train.py <span style='color:#111;'> 5.50KB </span>","children":null,"spread":false},{"title":"metric.py <span style='color:#111;'> 2.53KB </span>","children":null,"spread":false},{"title":"data_loader.py <span style='color:#111;'> 1.80KB </span>","children":null,"spread":false},{"title":".DS_Store <span style='color:#111;'> 6.00KB </span>","children":null,"spread":false},{"title":"run.py <span style='color:#111;'> 4.41KB </span>","children":null,"spread":false},{"title":".idea","children":[{"title":"misc.xml <span style='color:#111;'> 288B </span>","children":null,"spread":false},{"title":"wordseg.iml <span style='color:#111;'> 428B </span>","children":null,"spread":false},{"title":"deployment.xml <span style='color:#111;'> 569B </span>","children":null,"spread":false},{"title":"modules.xml <span style='color:#111;'> 266B </span>","children":null,"spread":false},{"title":"dictionaries","children":[{"title":"xiaheming.xml <span style='color:#111;'> 265B </span>","children":null,"spread":false}],"spread":false},{"title":".gitignore <span style='color:#111;'> 176B </span>","children":null,"spread":false},{"title":"inspectionProfiles","children":[{"title":"Project_Default.xml <span style='color:#111;'> 909B </span>","children":null,"spread":false},{"title":"profiles_settings.xml <span style='color:#111;'> 174B </span>","children":null,"spread":false}],"spread":false}],"spread":true},{"title":"data_process.py <span style='color:#111;'> 2.33KB </span>","children":null,"spread":false},{"title":"model.py <span style='color:#111;'> 1.41KB </span>","children":null,"spread":false},{"title":"config.py <span style='color:#111;'> 785B </span>","children":null,"spread":false}],"spread":false}],"spread":true}],"spread":true}]

评论信息

  • 张耀飞 :
    用户下载后在一定时间内未进行评价,系统默认好评。
    2021-08-09

免责申明

【只为小站】的资源来自网友分享,仅供学习研究,请务必在下载后24小时内给予删除,不得用于其他任何用途,否则后果自负。基于互联网的特殊性,【只为小站】 无法对用户传输的作品、信息、内容的权属或合法性、合规性、真实性、科学性、完整权、有效性等进行实质审查;无论 【只为小站】 经营者是否已进行审查,用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。
本站所有资源不代表本站的观点或立场,基于网友分享,根据中国法律《信息网络传播权保护条例》第二十二条之规定,若资源存在侵权或相关问题请联系本站客服人员,zhiweidada#qq.com,请把#换成@,本站将给予最大的支持与配合,做到及时反馈和处理。关于更多版权及免责申明参见 版权及免责申明