天然语言处理工具包 - NLTK

文本分词 分词处理相关API：python import nltk.tokenize as tk # 把样本按句子进行拆分 sent_list:句子列表 sent_list = tk.sent_tokenize(text) # 把样本按单词进行拆分 word_list:单词列表 word_list = tk.word_tokenize(text) # 把样本按单词进行拆分 punctTokeniz

>>阅读原文<<