基于Word2Vec的一种文档向量表示

被引:138
|
作者
唐明
朱磊
邹显春
机构
[1] 西南大学计算机与信息科学学院
关键词
TF-IDF; word2vec; doc2vec; 文本分类;
D O I
暂无
中图分类号
TP391.1 [文字信息处理];
学科分类号
摘要
在文本分类中,如何运用word2vec词向量高效地表达一篇文档一直是一个难点。目前,将word2vec模型与聚类算法结合形成的doc2vec模型能有效地表达文档信息。但是,这种方法很少考虑单个词对整篇文档的影响力。为了解决这个问题,利用TF-IDF算法计算每篇文档中词的权重,并结合word2vec词向量生成文档向量,最后将其应用于中文文档分类。在搜狗中文语料库上的实验验证了新方法的有效性。
引用
收藏
页码:214 / 217+269 +269
页数:5
相关论文
共 1 条
  • [1] An extensive empirical study of feature selection metrics for text classification .2 George Forman. Journal of Machine Learning Research . 2003