Bag of Tricks for Efficient Text Classification(FastText)

Bag of Tricks for Efficient Text Classification(FastText)_第1张图片
主要的有点就是快,用途就是用于文本分类,模型结构如上,主要是通过embedding将文本转换成向量,然后进行mean-pooling,然后输入到hidden隐向量中,通过softmax输出多分类,损失函数是对数似然损失函数(log-likelihood loss).
Bag of Tricks for Efficient Text Classification(FastText)_第2张图片

你可能感兴趣的:(语言模型,fasttxt)