電脳ラボ

脳のコンピュータモデルに関する論文のレビューなどを細々と続けていこうと思います。

2013-11-01から1ヶ月間の記事一覧

Value and prediction error in medial frontal cortex: integrating the single-unit and systems levels of analysis

Massimo Silvetti, Ruth Seurinck and Tom Verguts frontiers in HUMAN NEUROSCIENCE 既存の強化学習モデル(基底核系)にACCを加えたというより、線条体部分をACCで置き換えたという感じ。 ACCは、報酬の大きさ(状態価値?)と正の予測誤差と負の予測誤差…

Dopamine, Learning, and Impulsivity: A Biological Account of Attention- Deficit/Hyperactivity Disorder

Jonathan Williams, MBBS, MSc, MRCPsych, and Peter Dayan, Ph.D. JOURNAL OF CHILD AND ADOLESCENT PSYCHOPHARMACOLOGY Volume 15, Number 2, 2005 少ない待ち時間で小報酬か、大きな待ち時間で大報酬かを選ぶ課題を強化学習でシミュレーション。 学習率と…

強化学習の復習

強化学習 作者: Richard S.Sutton,Andrew G.Barto,三上貞芳,皆川雅章 出版社/メーカー: 森北出版 発売日: 2000/12 メディア: 単行本 購入: 5人 クリック: 76回 この商品を含むブログ (28件) を見る 細かいアルゴリズムの違いを復習。 主に上記の本の6章と7…

Dopamine transfer deficit: a neurobiological theory of altered reinforcement mechanisms in ADHD

Gail Tripp and Jeff R. Wickens Journal of Child Psychology and Psychiatry 49:7 (2008), pp 691–704 ドーパミン系の機能不全でADHDを説明する理論の一つ。 個人的に信憑性のある理論だと思うが、肝心の「なぜADHDでドーパミンの反応の対象の転移が起こり…

An artificial neural network analogue of learning in autism

Ira L. Cohen Biol Psychiatry. 1994 Jul 1;36(1):5-20. 自閉症のMLPモデル。 自閉症では一部の細胞数が多いという知見と少ないという知見があるので、それぞれのケースで学習がどのように進むかをシミュレーション。 というかニューラルネット界隈では、中…

A Computational Role for Dopamine Delivery in Human Decision-Making

David M. Egelman, Christophe Person, and P. Read Montague Baylor College of Medicine Journal of Cognitive Neuroscience 10:5, pp. 623–630 (1998) ドーパミン=予測誤差モデルの話だけど、一度選んだ選択肢を再び選ぶかどうかも、ドーパミン濃度(と…

ADHDのドーパミン仮説

ADHDにドーパミンが関与していること自体は広く受け入れられているが、その関与がどのようなものかに関しては諸説ある。 以前読んだ総説やモデルの論文(例えば http://m6chin9h96d.hateblo.jp/entry/2013/07/03/204331 )を参考にまとめてみる。 Grace ADHD…

カテコールアミンのモデル内での表現

銅谷ら ドーパミン:δ セロトニン:γ ノルアドレナリン:β アセチルコリン:α 「ドーパミン:δ」はSchultzの実験を受けた理論家のモデルを踏襲。 セロトニンとノルアドレナリンはオリジナル? (セロトニンが衝動性に関与するという話は以前にもあったようだ…

Deficient reinforcement learning in medial frontal cortex as a model of dopamine-related motivational deficits in ADHD

Silvetti M, Wiersema JR, Sonuga-Barke E, Verguts T. Neural Netw. 2013 Oct;46:199-209. doi: 10.1016/j.neunet.2013.05.008. Epub 2013 May 21. 自分達が作った、ACCの機能を組み込んだ強化学習モデルで、ADHDの症状を説明できる、という話。 モデルの詳…