告知#


デモ#


先週の復習,要約#

簡単な歴史#

AI Neural Networks Psychology
第一次 symbolic Perceptron Cognitive revolution
toy problems ADALINE
Neocognitron
Asociatron
第二次 Expert systems Back prop Connectionist
Brooks RNN Neuro Imaging
RL(Sutton & Burto) computational approach
第三次 Deep Learning
CNN

キーワード#

  • ニューラルネットワーク neural networks
  • パーセプトロン perceptron
  • 誤差逆伝播法 back propagation
  • 勾配降下法 gradient descent methods
  • ソフトマックス関数 softmax function
  • 交差エントロピー cross entropy
  • 確率的勾配降下法 stochastic gradient descent


Van Essen & Gallant (1994)


Left: Thorpe et al.(2001), Right: Felleman & Van Essen (1992)


Goodfellow et al. (2017) Fig.1 を改変


LeCun (2013) より


LeCun (2013) より


LeCun (2013) より


Goodfellow et al. (2017) Fig.1 を改変