【Word2Vecとは】アルゴリズム・原理と計算例

Word2Vecのアルゴリズム・原理について入門者向けにまとめました。
Word2Vecは2013年にGoogle社によって開発され、単語をベクトルで表現し、単語同士の意味の近さの計算や、計算のアナロジーを行えるようにする仕組みです。

例えば、女性職員、男性職員、女性、男性の４つの単語を次のようなベクトルで表すとします。

男性職員 – 男性 + 女性
= [0.4, 0.2. 0.8, 0.4] – [0.1, 0.0, 0.8, 0.2] + [0.2, 0.1, 0.2, 0.2]
= [0.5, 0.3, 0.2, 0.4]

となり、女性職員 ≒ 男性職員 – 男性 + 女性　となります。
このように単語の意味関係をベクトルの演算で行うことができます。