神经网络语言模型NNLM

NNLM(Neural Network Language Model) 神经网络语言模型对理解word2vec模型有很大的帮助, 包括对后期理解CNN,LSTM进行文本分析时有很大的帮助.   模型训练数据 是一组词序列w1…wT,wt∈V。其中 V 是所有单词的集合(即训练预料中的词构成的词典), 词向量把n-gram的离散空间转换为连续空间. 概率函数 $f(w_{t},w_{t-1},...
相关文章
相关标签/搜索