自然语言处理 | (13)kenLM统计语言模型构建与应用

本篇博客中我们将学习如何使用KenLM工具构建统计语言模型,并使用它完成一个典型的'智能纠错'文本任务。 目录 1.实验准备 2.训练数据 3.训练语言模型 4.模型压缩 5.模型加载 6.智能纠错 1.实验准备 安装依赖 # 安装依赖 !apt install libboost-all-dev !apt install libbz2-dev !apt install libeigen3-dev
相关文章
相关标签/搜索