宮崎大学大学院 工学研究科 情報工学専攻 2005年度前期 授業科目：神経回路網特論

単位数：２単位
対象：博士前期課程
日程：木 13:00〜14:30
教室： A-527
担当教官： 伊達 章
研究室番号： 工学部棟 A-423
メール：
ホームページ：http://www.cs.miyazaki-u.ac.jp/~date/lectures/2005neural/index.html
オフィスアワー： 木曜日 16:30--17:30 （事前連絡して頂ければ随時受け付けます）

正式なシラバス

概要

脳はどういう風に動いているのか． この講義では，その気分を数理モデルを使って味わうことが できることを示したい． 物事の断片から全体が想起される「連想記憶」， ニューロンが必要に応じて外界の環境に適応していく「自己組織地図」． そのような気分を感じることができる楽しい研究を，まず第一に，紹介する． 実は，これらの基本的な研究は，どちらも60年代後半から70年代の研究である． 研究が進んだとはいえ，現在でも，脳の情報処理には不明な点ばかりである． 実際の脳内から記録された実験データを解析する最近の研究を紹介し， この現状を理解する． そして，生物学的妥当性はともかく，目的論的立場から， 見るとか記憶することができる機械を作る基礎となる数理モデル研究の現状を紹介する． 講義全体を通してのテーマは情報表現と計算である．

授業計画

• 第1回. 4/7 (木) 講義全体の概論：脳とコンピュータ 配布物: シラバス 質問票 課題1（4/27まで）
• 第2回. 4/14 (木) 脳内における視覚情報処理 (1)
• 第3回. 4/21 (木) 自己組織化神経回路モデル (1)
• 第4回. 4/28 (木) 自己組織化神経回路モデル (2) 配布物: 課題2（5/26まで）
  自己組織化マップ   デモ  Cのサンプルコード  ファイルに出力バージョン
  • H. Ritter and K. Schulten, On the stationary state of Kohonen's self-organizing sensory mapping. Biological Cybernetics, 54:99-106, 1986. pdf
  • H. Ritter and K. Schulten, Convergence properties of Kohonen's topology conserving maps: Fluctuations, stability and dimension selection. Biological Cybernetics, 60:59-71, 1988. pdf
• 第5回. 5/12 (木) 脳内における視覚情報処理 (2)
視覚記憶のニューロン表現
• Miyashita, Y. : Neuronal correlate of visual associative long-term memory in the primate temporal cortex. Nature 335, 817-820, 1988.
• Miyashita, Y. and Chang, H.S. : Neuronal correlate of pictorial short-term memory in the primate temporal cortex. Nature 331, 68-70, 1988.
• 第6回. 5/19 (木) 連想記憶モデルのダイナミックス
• 神経回路網モデルとコネクショニズム 第5章 pp.77-98，東京大学出版会，1989．
• 第7回. 5/26 (木) 連想記憶モデル (2)
  • Hopfield,J., Feinstein, D. & Palmer,R. 'Unlearning' has a stabilizing effect in collective memories. Nature, 304. 158-159, 1989.
  • D. Wang, J. Buhmann, and C. von der Malsburg. Pattern segmentation in associative memory. Neural Computation, 2:94-106, 1990.
• 第8回. 6/2 (木) 自己組織化神経回路モデル (3)
  • P. Foldiak, Forming sparse representations by local anti-Hebbian learning, Biological Cybernetics, vol. 64, pp. 165-170, 1990. papers
• 第9回. 6/9 (木) 自己組織化神経回路モデル (4)
  • 速修 確率論と情報理論
• 第10回. 6/16 (木) 自己組織化神経回路モデル (5)
  • BA Olshausen BA, DJ Field, Emergence of simple-cell receptive field properties by learning a sparse code for natural images, Nature, vol. 381, pp.607-609, 1996.
• 第11回. 6/23(木) （ニューロコンピューティング研究会のため休講）
  
  • gnuplot を用いた「自己組織化マップ」学習ダイナミックスの理解， （宮崎大学 「教材開発プロジェクト」採択課題） 電子情報通信学会ニューロコンピューティング研究会 琉球大学工学部 （沖縄県中頭郡西原町）23 Jun 2005.
• 第12回. 6/30(木) 確率的モデルによる情報処理 (1) 例題
  • S. Geman and K. Kochanek, Dynamic programming and the graphical representation of error-correcting codes, IEEE Trans. Information Theory}, vol.47, no.2, pp.549-567, Feb. 2001.
• 第13回. 7/7 (木) 確率的モデルによる情報処理 (2) 解説
  • H. Kunsch, S. Geman, and A. Kehagias, Hidden Markov random fields, Annals of Applied Probability, vol.5, no.3, pp.557-602, 1995.
• 第14回. 7/14 (木) 確率的モデルによる情報処理 (3)
• 課題3＋メモ 提出期限： 7/28（木）
• 課題データ： r1234567obs r221obs： パラメータ データの読み方の例
  
• チェック用データ: r20050511obs r20050511true r20050511map
• 学習用音声データ：データの説明
• aiueo.dat （生データ，gnuplot で plot "aiueo.dat" としてみるとよくわかる）
• a200p50s8.dat （1-8 の値をもつデータ200個， 50msec のデータ「あ」）
• a400p50s8.dat （1-8 の値をもつデータ400個， 50msec のデータ「あ」）

参考書籍・文献

• 神経回路網モデルとコネクショニズム，甘利俊一，東京大学出版会，1989． （重要なことがとても分かりやすく書かれている．）
• The Computational Brain, Patricia S. Churchland, Terrence J. Sejnowski 著, MIT Press.
• Vision and Art: The Biology of Seeing, Margaret S. Livingstone 著, Abrams, 2002. （絵がいっぱいあって楽しい本）.

成績の評価基準

レポート．

キーワード

• 伊達のHPへ