ノイジーネットワーク

ノイジーネットワークはネットワークの重みにノイズを加えることで、広範囲の探索を実現します。

強化学習において、エージェントの行動選択においてε-greedy法がよく用いられます。これはεの確率でランダムに行動し、1-εの確率で期待値の高い行動を選択するものです。ランダムな行動によりエージェントは新しい行動を試したり、知識を更新します。しかし、これでは広い空間を探索することができません。

👉より体系的に学びたい方は「人工知能基礎」（東京大学松尾豊先生監修）へ

クイズ

強化学習モデルの一つである、ノイジーネットワークについて述べた文章のうち、最も適切な選択肢を一つ選べ。

1.ネットワーク自体にノイズを加え、行動範囲を拡大した。
2.ε-greedy法を用いてアクション選択に対してノイズを加えた。
3.ノイズεの確率でランダムで行動をとるようにした。
4.ノイズ1-εの確率で期待値の高い行動を取るようにした。

正解を見る

解説を見る
ノイジーネットワークはネットワーク自体にノイズを加えることによって行動範囲を拡大したものです。DQNでは行動探索の拡大のためにε-greedy法を用いてアクション選択に対してノイズを加えていましたが、探索率εの設定が困難であったことなどによって探索に限界がありました。しかし、Q-network自体にノイズを加えてアクション選択に確率性を持たせることによって探索が促進されました。
👉G検定の受験対策は約1,000問収録の「G検定実践トレーニング」へ

人工知能基礎講座を提供中

人工知能の第一人者である東京大学の松尾豊教授が監修した人工知能基礎講座を受講してみませんか？人工知能の歴史から自然言語処理、機械学習、深層学習といった最先端のトピックやAIに関わる法律問題まで網羅しているので全てのビジネスパーソン・AIの初学者におすすめです。

サンプル動画

人工知能基礎講座はこちら↓

AI初学者・ビジネスパーソン向けのG検定対策講座

G検定受験前にトレーニングしたい方向けの問題集「G検定実践トレーニング」も提供中です。

zero to oneの「E資格」向け認定プログラム

日本ディープラーニング協会の実施するE資格の受験ならzero to oneの「E資格」向け認定プログラム (税込165,000円) をおすすめします。当講座は、東京大学大学院工学系研究科の松尾豊教授と東北大学大学院情報科学研究科の岡谷貴之教授が監修する実践的なプログラムとなっています。厚生労働省の教育訓練給付制度対象のE資格認定プログラムの中では最安値※となり、実質負担額49,500円～(支給割合70%の場合)で受講可能です。※2023年弊社調べ

G検定（AI・機械学習）用語集トップ

＜体験型＞学習ブログ

ノイジーネットワーク