分词

涉及到的类：IKAnalyzer，TokenStream，CharTermAttribute

TokenStream的工做流程：

一、实例化Tokenizer或TokenFilter,，添加属性到AttributeSource，或从AttributeSource中获取属性。

二、调用reset()方法

三、从流中和存储本地引用检索想要访问全部属性

四、调用increamStoken()方法，直到返回false

五、调用end（）方法执行任何end-of-stream操做

六、调用close()方法在结束使用TokerStream释放一些资源

end()、reset()、close()的覆盖一般要调用super.end()、super.reset()、super.close()