Word2vec 入门(skip-gram部分)

Skip-gram 给定句子中一个特定的词(input word),随机选它附近的一个词。网络的目标是预测 我们选到这个附近词的概率。 输入,输出 取窗口大小为2(前后两个词):得到一些词对: 如之中的(quick, brown) 训练神经网络时: 输入quick的one-hot编码, 输出层softmax分层的brown的概率应该是最大的 隐层: 我们训练一个简单的网络来执行一个任务,但是我们实
相关文章
相关标签/搜索