结巴分词：全模式、精确模式和搜索引擎模式

不学无术-倪

于 2022-03-12 16:40:30 发布

阅读量2.3k

点赞数

CC 4.0 BY-SA版权

分类专栏：机器学习文章标签： python

本文链接：https://blog.csdn.net/weixin_40809507/article/details/123445928

机器学习专栏收录该内容

35 篇文章

订阅专栏

本文详细介绍了jieba分词库在全模式、精确模式和搜索引擎模式下的使用方法。全模式将句子切分成尽可能多的词语，精确模式提供最精准的分词结果，而搜索引擎模式则适用于搜索场景，优化了分词效果以匹配搜索需求。通过示例展示了不同模式下分词结果的差异和类型。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

jieba.lcut(sentence)：返回的是一个列表
jieba.cut(sentence, cut_all=False)：
返回的是一个迭代器，cut_all默认为False(精确模式)，True(全模式）
jieba.cut_for_search(sentence)：返回一个迭代器
jieba.lcut_for_search(sentence)：返回一个集合

全模式

seg_list = jieba.cut("我来到北北京清华大学",cut_all=True)
print(type(seg_list))
print(seg_list)

精确模式

seg_list = jieba.lcut("我来到北北京清华大学")#cut_all=False
print(type(seg_list))
print(seg_list)

jieba.cut_for_search(sentence)：返回一个迭代器
jieba.lcut_for_search(sentence)：返回一个集合

搜索引擎模式

seg_list = jieba.cut_for_search("我来到北北京清华大学")
print(type(seg_list))
print(", ".join(seg_list))
seg_list = jieba.lcut_for_search("我来到北北京清华大学")
print(type(seg_list))
print(seg_list)