贪心学院—自然语言处理—评估词向量

评估词向量:

  1. t-distributed Stochastic Neighbor Embedding(t-SNE)对训练得到的词向量降维到二维空间进行观察;sklearn中tsne可视化;t-SNE完整笔记
  2. 与已有的数据进行相似度对比(前提是你已有一个训练好的词库及其词向量,通过计算某个分词与这个词库中词的相似度进行对比)
  3. 类比(analogy):woman:man == boy:girl (如已知woman:man的相似性,给定boy来寻找girl)

个人整理笔记,方便复习,若侵权,请联系。
附贪心学院课程链接: https://www.greedyai.com/courseinfor/105

你可能感兴趣的:(概念)