设为首页收藏本站

Crossin的编程教室

 找回密码
 立即加入
查看: 5807|回复: 3
打印 上一主题 下一主题

jieba分词的问题

[复制链接]

174

主题

45

好友

11万

积分

管理员

Rank: 9Rank: 9Rank: 9

楼主
发表于 2018-4-13 14:09:05 |显示全部楼层
词频会影响分词时候的划分。你现在词少不存在这个问题,复杂了之后,同一句话有多种划分方法,这时候是要参考词频的
#==== Crossin的编程教室 ====#
微信ID:crossincode
网站:http://crossincode.com
回复

使用道具 举报

174

主题

45

好友

11万

积分

管理员

Rank: 9Rank: 9Rank: 9

沙发
发表于 2018-4-13 21:48:24 |显示全部楼层
人工智能 发表于 2018-4-13 18:45
crossin你说的词少是指什么啊
我现在用jieba分完词去掉单字去掉特殊符号以及一些我自己选的词 有6000多个 ...

一般不需要用自定义字典
自定义是在你对它的分词结果不满意的时候,一般是一些专业化强的文章,你可以自己定义下。词频越高,越容易被划分为一个词
#==== Crossin的编程教室 ====#
微信ID:crossincode
网站:http://crossincode.com
回复

使用道具 举报

174

主题

45

好友

11万

积分

管理员

Rank: 9Rank: 9Rank: 9

板凳
发表于 2018-4-15 00:12:25 |显示全部楼层
人工智能 发表于 2018-4-14 11:10
嗯 ,  还有一个问题啊 是云词的问题
我分词后用counter统计的词频 然后去掉了一些没用的词 最后的结果就 ...

词频你可以自己处理下,比如统一开根号或者除以几,缩小差距
报错那个是图片太小
#==== Crossin的编程教室 ====#
微信ID:crossincode
网站:http://crossincode.com
回复

使用道具 举报

174

主题

45

好友

11万

积分

管理员

Rank: 9Rank: 9Rank: 9

地板
发表于 2018-4-16 23:02:00 |显示全部楼层
人工智能 发表于 2018-4-16 16:28
嗯,图片太小是指的图片大小太小? 还是尺寸

取色图片的尺寸不够你词云的大小
#==== Crossin的编程教室 ====#
微信ID:crossincode
网站:http://crossincode.com
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即加入

QQ|手机版|Archiver|Crossin的编程教室 ( 苏ICP备15063769号  

GMT+8, 2024-5-3 15:00 , Processed in 0.024348 second(s), 21 queries .

Powered by Discuz! X2.5

© 2001-2012 Comsenz Inc.

回顶部