深圳网站建设公司易捷网络科技
深圳易捷网络科技有限公司logo易捷网络

浅析新浪微博搜索分词技术的不足之处

信息来源:深圳网站建设公司易捷网络
添加时间:2018-04-28

不是故意迫害新浪微博,也不是对新浪微博不满,在这里指手画脚。我是一个过路人,秉承技术学习的态度,来和大家分析新浪微博搜索分词的不足。迭词是非常重要的测试元素,我们以阿里巴 巴作为测试词汇,去评测效果:效果是惊人的不令人满意。那么真实的测试阿里巴巴效果应该是这样子的:

可见阿里巴 巴和阿里巴巴这两个看似相同的词,但是在新浪微博的搜索中,差异竟然这么明显。其原因据我推测是: 没有做全局分词 。例如,阿里巴 巴至少应该分为三个词组,但是通过观察,它只用了专业名词词库。阿里巴巴应该切分的5个词组阿里,巴,巴,巴巴阿里巴巴。如果没有这样做,将会直接导致搜索阿里巴 巴效果非常差,几乎搜索不到阿里巴 巴相关词汇。


同理,搜索阿里 巴巴效果也会很差,事实也证明如此:当然,他们这样分词也有自己的道理,那就是用户给定的空格,那一定是词与词的分隔符,或者他们自己分词用的分隔符就是空格。在以前可以这样解释,但是搜索在N年前就进入了语义时代,如果还保留以前思想,那一定会落伍。尤其是:你把这三个case放入到百度、360、搜狗搜索里面去,他们都能很好处理。让若你把QQ、Q Q放入新浪微博搜索,结果会更差。可见新浪微博的搜索非常依赖于词库,可是呢,往往是细节决定成败 !

产品塑料包装行业升达瑞丰塑料制品网站首页设计效果图
产品塑料包装行业升达瑞丰塑料制品网站首页设计效果图
网站建设最新资讯推荐
建站视频
膜结构建筑施工行业网站建设方案解析
快速导航
首页
建站套餐
模板案例
建站方案
制作费用
视频中心
常见问题
联系我们
企业网站制作套餐
基本型网站制作套餐
标准型网站制作套餐
品牌型网站制作套餐
综合型网站制作套餐
企业网站制作教程
网站建设常见问题
网站制作常见问题
网站设计常见问题
网站优化常见问题
企业邮箱常见问题
网站备案常见问题
联系方式
联系人:赵经理
电话:0755-61603557
邮箱:info@fantodo.com
手机:13714247375
地址:广东.深圳宝安西乡宝源路鸿源大厦1009
网站建设公司联系人二维码
微信扫码咨询
深圳市易捷网络科技有限公司版权所有