◎【学習途中】勾配消失問題の解消・・・活性化関数 １．tanh関数 ２．ReLu関数 －Leaky ReLU・・・x<0でわずかな傾き －Parametric ReLU・・・x<0の傾きを学習で最適化 －Randomized ReLU・・・x<0の傾きをランダムの試す ◎【学習途中】鞍点問題の解消・・・…