npartword:golang分布式中文分词系统 源码

npw介绍 npw:npartword,golang实现中文分词系统,主体分词逻辑有两个部分。 1.初步树查找字典,通过disctance或mmseg算法过滤分词 2.维特比算法解隐马尔可夫模型,对词进行隐状态标注分词 3.加入情感词典,文本情感分类算法,对文本进行情感评分,如积极,消极,否定等,一般分值越来越文本的积极性发生 分词服务系统的实现,通过nmid的worker方式实现。 1.分词系统服务端,需要实现nmid的工人,服务的实现十分简单,无需考虑通信问题,这些nmid解决。 2.分词系统服务调用,只要通过nmid的客户端调用即可,任何nmid的客户端都可以随时跨服务器的使用分词系统。 php调用示例 $ host = "xxx.xxx.x.xx" ; $ port = xxx; $ client = new ClientExt ( $ host , $ port ); $