word2vec如何处理句子的结尾

时间:2017-07-18 15:05:37

标签: python gensim word2vec

训练时,word2vec会做什么来处理句子末尾的单词。它会使用另一个句子开头的确切单词作为中心单词的上下文单词 在最后一句末尾。

1 个答案:

答案 0 :(得分:1)

window被裁剪到当前文本示例的边缘。因此,文本的第一个单词仅从同一文本中的后续单词中获取其上下文单词。 (以前的例子中没有保留任何单词。)同样,文本中的最后一个单词只能从同一文本中的前一个单词中获取其上下文单词。 (从下一个文本示例中不会引入任何单词。)每个文本示例(又名sentence)都是独立的。