chop
Python 中文分词工具包
欢迎
GitHub:
Pypi:
依赖
Python3
使用说明
代码对 Python 3 兼容
全自动安装: easy_install chop 或者 pip install chop / pip3 install chop
接口
from chop.hmm import Tokenizer as HMMTokenizer
from chop.mmseg import Tokenizer as MMSEGTokenizer
sentence = "工信处女干事每月经过下属科室都要亲口交代24口交换机等技术性器件的安装工作。"
def main():
HT = HMMTokenizer()
MT = MMSEGTokenizer()
print('HMM Tokenizer:', ' '.join(HT.cut(senten
1