Yard中文分词系统V0.1.1版发布啦

这次主要是对Yard中文分词系统里面关于最长词的归并算法做了优化,现在系统能够对“使用户满意的做法,乒乓球拍卖完了”这样的句型进行正确切分了。但是目前一直没有找到合适的字频词频词典,所以最大概率分词算法还没能加入到分词系统中。按计划打算在这周自己对1亿字左右的语料进行切分统计做个字频词频词典出来到时候分享给大家。
就在昨天我认识的一个学中文信息处理的兄弟,由于答辩的时候被一老教授给K了心情很不爽说什么想放弃了不想再从事这个行业。我不知道他是真的不想再从事这个行业还是因为老教授的原因,我只知道我自己很喜欢这个行业我对文字着迷对每次取得的进步都感到很欣喜哪怕是很小的进步!

欢迎大家下载并提出宝贵意见!

Yard中文分词系统V0.1.1版下载


Yard中文分词系统V0.1.1版

 

你可能感兴趣的:(算法)