HanLP:汉语语言处理源码

HanLP是一系列模型与算法组成的NLP工具包，由大快搜索主导并完全开源，目标是普及自然语言处理在生产环境中的应用.HanLP具备功能完善，性能高效，架构清晰，语料时新，可自定义的特点。HanLP提供下列功能：中文分词HMM-两字组（速度与精度最佳平衡;一百兆内存）最短路分词，N-最短路分词由字构词（侧重精度，全世界最大语料库，可识别新词;适合NLP任务）感知机分词，CRF分词词典分词（侧重速度，每秒数千万字符;省内存）极速词典分词所有分词器都支持：索引全切分模式用户自定义词典兼容繁体中文训练用户自己的领域模型词性标注HMM词性标注（速度快）感知机词性标注，