ニューラルネット プレイグラウンド

再生・1ステップのたびに下の設定が使われます。まずは初期値で動かし、変えながら違いを確かめてください。

• 学習率: 重みを1回でどれだけ大きく直すか。大きすぎると不安定、小さすぎると遅いです。0.01〜0.03あたりから試すのがおすすめです。
• 活性化: ニューロン出力を非線形の曲線に変えます。Tanhはなめらかに−1〜1、ReLUは0未満を0にします。
• 正則化: 重みが大きくなりすぎないようペナルティを付けます。訓練データを「丸暗記」する過学習を抑えます。
• 正則化の強度: 正則化ペナルティの強さです。「なし」のときは使われません。