jieba

jieba '结巴‘中文分词：是广泛的使用的中文分词工具，具有以下特点： 1）三种分词模式：精准模式，全模式，和搜索引擎模式 2）词性标注和返回词语在原文的起止位置（Tokenize） 3)可加入自定义字典 4）代码对Python2/3均兼容 5）支持多种语言，支持简体繁体 项目地址：https://github.com/fxsjy/jieba Stanford NLP 提供了一系列自然语言分析工

>>阅读原文<<