Select Language

AI Technology Community

強化学習のscore function

score functionの定義とは、score functionが最大対数尤度関数の中で対数尤度関数の勾配を0にする勾配を求めるものであるということです。

ここに画像の説明を挿入


つまり、最大尤度問題を解くことはscore functionを解くことになります。
2、さらにパラメータについて微分すると、Fisher Informationが得られます。FIMはSFの負の導関数です。

3、SFの期待値は0です。
ここに画像の説明を挿入
この性質は、ベースラインのある方策勾配に利用することができます。


post
  • 41

    item of content
人工知能に関する知識を共有します。これにはAIアルゴリズム、応用例、データ、モデルなどに関する情報が含まれます。