活性化関数の性質調査 自分好みの活性化関数の作成から、ReLU(以下relu)の優秀な要因の特定までを行った。 使用ハード構成OS windows10CPU i7-7700KGPU GTX1080メモリ 16GB 平方根の活性化関数 常にプラスがいいのか? 傾き0が学習を進めるのか?