Now Loading...

Now Loading...

N-gram

N-gram

n-gramとは、単語を単位として扱うことを考え、何らかの列を連続するn個の組みの列(nは並べる個数)にした表現をn-gramと呼びます。

クイズ

以下の文章を読み、空欄(ア)に最もよく当てはまる選択肢を1つ選べ。 自然言語処理において、文章が与えられた時に一文字ずつ、あるいは一単語ずつずらしながらN個の文字列、単語列を切り出す手法を(ア)という。この手法は、多言語に適用しやすい、検索漏れを生じないなどの利点があるが、ノイズが大きいといった欠点もある。
  • 正解を見る
  • 解説を見る
    N-gramでは文章からN文字ずつの文字列を1文字ずつずらしながら抽出します。例えば「私は朝食を食べた。」という文についてN=3のN-gramを行うと、「私は朝」,「は朝食」,「朝食を」,「食を食」,「を食べ」,「食べた」,「べた。」という3文字ずつの文字列を抽出できます。単純なアルゴリズムであるため、多くの言語に適用でき、検索漏れがないといった利点がある一方、ノイズや必要なデータ量が大きくなるといった欠点もあります。

特別割引クーポンのお知らせ

<人工知能基礎&G検定実践問題集>

・クーポン:aibgt220920-2bso
・有効期間:2022年10月21日(金)

*使い方:以下バナーより「購入する」に進んでいただき、左下のクーポン欄にご記入、適用してください。

zero to one G検定 jdla

<G検定実践トレーニング>

・クーポン:gt220920-1dao
・有効期間:2022年10月21日(金)

*使い方:以下バナーより「購入する」に進んでいただき、左下のクーポン欄にご記入、適用してください。

zero to one G検定 jdla

関連ワード

ディープラーニングの手法

畳み込みニューラルネットワーク

深層生成モデル

画像認識分野

音声処理と自然言語処理分野

深層強化学習分野

モデルの解釈性とその対応

モデルの軽量化