word2vec中 cbow 与 哈夫曼树方法回顾

基于之前多个词预测下一个词  cbow

基于一个词预测之前的多个词 skip-gram

哈夫曼树 :节点权重组合最小的树。 算法: 从最小权重开始做叶子节点的二分类树




求最大值,用梯度上升





你可能感兴趣的:(word2vec中 cbow 与 哈夫曼树方法回顾)