言語モデルとは人間が使う言葉の出現頻度をモデル化したものです。

　もう少し詳しく説明すると、ある文章や単語(条件)が与えられた場合にその後に出現する単語の確率をモデル化したものです。確率分布を元に文章を生成することを行うため、一種の生成モデルとも捉えることができます。

　この条件付き確率をモデル化するために様々な手法がありますが、現在最も使われているのが条件付き確率のモデルをニューラルネットでモデル化したニューラル言語モデルです。

ニューラル言語モデル以前ではN-gramなどのモデルがあります。