2019 Fiscal Year Annual Research Report
Visual, auditory and tactile SHITSUKAN recognition mechanisms based on signal modulations
| Project Area | Understanding human recognition of material properties for innovation in SHITSUKAN science and technology |
|---|
| Project/Area Number |
15H05915
|
|---|
| Research Institution | Kyoto University |
|---|
Principal Investigator |
西田 眞也 京都大学, 情報学研究科, 教授 (20396162)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
古川 茂人 日本電信電話株式会社NTTコミュニケーション科学基礎研究所, 人間情報研究部, 上席特別研究員 (90396169)
鈴木 匡子 東北大学, 医学系研究科, 教授 (20271934)
柳井 啓司 電気通信大学, 大学院情報理工学研究科, 教授 (20301179)
|
|---|
| Project Period (FY) |
2015-06-29 – 2020-03-31
|
| Keywords | 質感 / 情報工学 / 認知科学 / 神経科学 / 感性情報学 |
|---|
| Outline of Annual Research Achievements |
・視覚・触覚を担当する西田チームでは、前年度に引き続いて液体動画の粘性判断を学習した神経回路の分析を進め、最新の分析法を導入するなどして質感認識のメカニズムに関する洞察を得た。物体の表面質感の違いが、物体の運動速度の推定に影響することを発見した。ゲーム感覚で視覚能力を測定するシステムを開発した。坂本班のデータに基づき表面の画像特徴から温度を推定する視覚能力の統計モデルを作った。触覚の運動検出メカニズムの分析を進めるとともに、触覚テクスチャ知覚は低次の画像統計量だけに感度を持つという仮説を強固にした。
・聴覚を担当する古川チームでは、環境音や音声の処理に最適化された深層ニューラルネットワークと聴覚神経系の比較を行った。 ヒトの知覚におけるAM信号検出などの心理物理学的現象とニューラルネットにおける刺激内部表現との対応関係に着目し、生理学・心理学の両分野も含めた聴覚系の総合的な理解を進めた。
・鈴木チームは、前年度までに、局所脳損傷例から視覚性質感認知には紡錘状回・舌状回が関連していること、レビー小体型認知症とアルツハイマー型認知症(AD)の二つの変性性認知症から前者でとくに視覚性質感認知の障害が顕著であることを明らかにしてきた。本年度はレビー小体型認知症を含むレビー小体病(LBD)およびADの触覚性質感認知および視覚性質感認知との関連の検討を進めた。
・柳井チームでは、Convolutional Neural Networkを用いた質感変換技術とその応用について取り組み、ラベルのみからによる食事画像の食事・皿・背景への分離、conditional StyleGANによる新しい料理の創造、ラーメンの実写真の意味的編集が可能なシステムの開発、MUNITを利用した物体質感変換などの成果を得た。
|
| Research Progress Status |
令和元年度が最終年度であるため、記入しない。
|
| Strategy for Future Research Activity |
令和元年度が最終年度であるため、記入しない。
|
Research Products
(73 results)
-
-
-
-
-
-
-
-
-
[Journal Article] Clinical and cerebral metabolic changes in Parkinson’s disease with basal forebrain atrophy.2020
Author(s)
Miyeong G, Baba T, Hosokai Y, Nishio Y, Kikuchi A, Hirayama K, Hasegawa T, Aoki M, Takeda A, Mori E, Suzuki K.
-
Journal Title
Movement Disorders
Volume: -
Pages: -
DOI
Peer Reviewed / Open Access
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
[Presentation] Spatial and time-frequency representations of glossy material properties in the monkey inferior temporal cortex.2019
Author(s)
Kawasaki, K., Miki, H., Anzai, K., Sawayama, M., Matsuo, T., Suzuki, T., Hasegawa, T., & Okatani, T.
Organizer
Society for Neuroscience 2019
Int'l Joint Research
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
[Presentation] Characteristics of the clinical and cerebral metabolism in Parkinson's disease with atrophy in nucleus basalis of Meynert2019
Author(s)
Gang M, Baba T, Hosokai Y, Nishio Y, Kikuchi A, Hirayama K, Hasegawa T, Aoki M, Takeda A, Mori E, Suzuki K.
Organizer
International Congress of Parkinson's Disease and Movement Disorders
Int'l Joint Research
-
-
[Presentation] Clinical features and cerebral metabolic abnormalities in Parkinson’s disease with atrophy in the nucleus basalis of Meynert.2019
Author(s)
Gang M, Baba T, Hosokai Y, Nishio Y, Kikuchi A, Hirayama K, Hasegawa T, Aoki M, Takeda A, Mori E, Suzuki K.
Organizer
International Conference of Korean Movement Disorder Society
Int'l Joint Research
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
