word2vec 到底学到了什么？研究者给出闭式学习理论

Berkeley AI Research 的新论文为 word2vec 给出了定量可预测的学习理论：在合理实用条件下，其学习问题可化简为无权重最小二乘矩阵分解，梯度流动力学存在闭式解，最终学到的嵌入等价于对目标矩阵 M* 做 PCA。