本文共 329 字，大约阅读时间需要 1 分钟。

词共现矩阵定义

通过统计一个事先指定大小的窗口内的word共现次数，以word周边的共现词的次数做为当前word的vector。具体来说，我们通过从大量的语料文本中构建一个共现矩阵来定义word representation。

例子

有语料如下：

I like deep learning.

I like NLP.

I enjoy flying.

则其共现矩阵如下：

将共现矩阵行(列)作为词向量表示后，可以知道like，enjoy都是在I附近且统计数目大约相等，他们意思相近。

矩阵定义的词向量在一定程度上缓解了one-hot向量相似度为0的问题，但没有解决数据稀疏性和维度灾难的问题。

转载地址：http://qyugf.baihongyu.com/