jieba库的使用
!如何安装jieba?
我们使用cmd命令输入python -m pip install jieba;等一段时间就下好了。
!jieba库有啥用?
就是将中文语句进行分词
!它有几种模式:精确模式、全模式、搜索引擎模式
精确模式:把文本精确地切分开,不存在冗余单词
全模式:把文本中所有可能的词语都扫描出来,有冗余
搜索引擎模式:在精确模式 的基础上,对场次再次切分。
!jieba库常用函数与案例
import jieba str="Tom同学是一个蠢货" s1=jieba.lcut(str)#j精确模式 print(s1) s2=jieba.lcut(str,cut_all=True)#全模式 print(s2) s3=jieba.lcut_for_search(str)#搜索引擎模式 print(s3) s4=jieba.add_word("那是不可能的")#向分词词典增加新词 print(s4)
执行结果:
!在我们的这个实例的演示过程中,我们有的人可能会出现一个情况,就是我们使用jieba库的时候,输出的结果为一串乱码。这个时候,我们的操作方式剋 参考如下的链接:
https://blog.csdn.net/chaofanjun/article/details/88406310?utm_medium=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.control&dist_request_id=7f57040a-e97d-4459-abb0-0f641b16ed4f&depth_1-utm_source=distribute.pc_relevant.none-task-blog-BlogCommendFromMachineLearnPai2-1.control
,也就是在我们原来的python3.sublime-build文件中输入一行:"env": {"PYTHONIOENCODING": "utf8"}#通过这句,使编码一致,都是utf8。就好了。