諸々の提出書類で実験できず。1週間空けて復帰。
報告書類を書いていたら、やっぱりフィッシャー情報行列とヘッセ行列の違いがよくわからなくなってきた。 対数尤度のヘッセ行列とフィッシャー情報行列に何かしらの共通点があるはず。
- Notes on the Limitations of the Empirical Fisher Approximation 経験フィッシャー行列の性能限界について。
ヘッセ行列のくだりから自然勾配の導出まで、紙に証明をまとめた。明日辺りに記事に起こす。
諸々の提出書類で実験できず。1週間空けて復帰。
報告書類を書いていたら、やっぱりフィッシャー情報行列とヘッセ行列の違いがよくわからなくなってきた。 対数尤度のヘッセ行列とフィッシャー情報行列に何かしらの共通点があるはず。
ヘッセ行列のくだりから自然勾配の導出まで、紙に証明をまとめた。明日辺りに記事に起こす。