今天同事谈起全文搜索，他说道你又做不到搜索错误提示，就是搜了 fcuk google会提示你是不是要查 fuck这样的提示，因为在搜索中确实很难避免用户输错造成词的搜索不正确。

今天顺便拿google实验了一下，发现它的中文分词居然也开始使用字单位的而不是词单位的分词结构，比如：
输入：
可莱斯勒 （应该是 克莱斯勒）

克莱斯勒中国-- 首页

www.chrysler.com.cn/ - 2k - www.chrysler.com.cn/+%E5%8F%AF%E8%8E%B1%E6%96%AF%E5%8B%92&hl=zh-CN&ct=clnk&cd=1&gl=cn&st_usg=ALhdy2_iERk2G7HVE9De5hxu2L7NosBLnQ" target="_blank" class="fl">网页快照 - www.chrysler.com.cn/" class="fl">类似网页

克莱斯勒_报价_参数_配置_太平洋汽车网克莱斯勒品牌专区

太平洋汽车网汽车报价库克莱斯勒汽车品牌专区提供汽车制造厂商简介，要闻，最新动态，生产车型等。这里你可以了解到克莱斯勒汽车的价格、参数、配置、资讯、图片、评论 ... price.pcauto.com.cn/brand.jsp?bid=39 - 59k - 网页快照 - 类似网页

克莱斯勒-搜狐汽车

在履行社会责任方面，戴姆勒-克莱斯勒集团基金在2006年出资万美元支持公益事业。 克莱斯勒集团是全球第五大汽车生产商戴姆勒-克莱斯勒股份公司的一个组成部分。 ... jsp.auto.sohu.com/view/brand-bid-191.html - 67k - 网页快照 - 类似网页

可莱斯勒的相关焦点

[记者观察]上南合并会是下一个戴克吗？ - 14小时前 今年５月，私募基金Ｃｅｒｂｅｒｕｓ资本管理公司以７４亿美元收购克莱斯勒集团８０．１％的股份。这意味着，戴姆勒与克莱斯勒各自单飞，戴克集团将被拆分。 ... 红网 - 9 篇相关文章 » 年度11大失败财经预言伯南克曾低估次贷危机 - 和讯 - 6 篇相关文章 »

克莱斯勒_戴姆勒-克莱斯勒_新浪汽车_新浪网

克莱斯勒,戴姆勒-克莱斯勒,汽车,汽车降价,新车,汽车报价,二手车. auto.sina.com.cn/salon/DAIMLERCHRYSLER/CHRYSLER.shtml - 223k - 网页快照 - 类似网页

克莱斯勒300C_北京奔驰_新浪汽车_新浪网

国产克莱斯勒300C沿承了进口克莱斯勒300C的设计与品质，增配后排DVD音响系统、18英寸镀铬铝圈、电加热座椅等豪华配置，成为同级豪华车中标准配置最高、品质最高的车型 ... auto.sina.com.cn/salon/bbdc05/bjbcdb/sub_brand/klsl300c.html - 80k - 网页快照 - 类似网页

【图】克莱斯勒汽车报价_汽车之家

汽车报价_汽车报价大全提供汽车报价、最新汽车、汽车价格、汽车新闻、汽车行情、汽车评测和汽车经销商等综合信息。 car.autohome.com.cn/brand/69/ - 2k - 网页快照 - 类似网页

从highlight来看这次搜索的分词应该是以字为单位的，至于克莱斯勒使用贝叶斯或者其他统计学算法就可以算出来，这没什么具体难度。只是感叹一下中文分词的难度，当年第一次搞的时候也采用了je分词，自己也加了词库，但是发现用户输入的内容却是千奇百怪造成了很大问题，使得搜索效率严重下降，然后同事推荐了两分原理的分词，但它的限制就是输入单子就搜不出东西，实验之后认为非常不理想，最后还是用了最简单的单字发，使用单子之后索引的效率确实有所下降，但查处的准确度已经近乎完美，但这不是一个最高效的方法。但今天看看google似乎也采用了单子分词算法看来目前来说分词还是有一定的难度，只好大家各自研究了，大部分分词都是建立在词库上的也难免有些问题，特别是对于一些特殊领域比如it 科技 农林，由于专业名词较多最后导致分词失误，中文说起来容易却不好处理，感叹一下。