2017 Fiscal Year Research-status Report
| Project/Area Number |
15K12052
|
|---|
| Research Institution | Tokyo Woman's Christian University |
|---|
Principal Investigator |
田中 章浩 東京女子大学, 現代教養学部, 教授 (80396530)
|
|---|
| Project Period (FY) |
2015-04-01 – 2019-03-31
|
| Keywords | 音声 / 言語理解 / 非言語情報 / 感情 / 魅力 |
|---|
| Outline of Annual Research Achievements |
内容が理解され，記憶に残りやすいのはどのような音声であろうか．常識的には，魅力的で感情豊かな声は理解や記憶を促進し，笑顔でしゃべれば話の内容の理解や記憶も促されると考えるだろう．しかし，本研究ではそうした話し方はむしろ逆効果である可能性に着目する．具体的には，(1)音声の感情情報処理が音声言語の理解・記憶に及ぼす影響，(2)音声の魅力情報処理が音声言語の理解・記憶に及ぼす影響，(3)視覚情報処理が音声言語の理解・記憶に及ぼす影響，以上3点の検討を通して，記憶に残りやすい音声の要件を明らかにすることを目的とする．
3年目である平成29年度は，上記項目(3)に関する検討を進めた．項目(1)および項目(2)では，聴覚呈示される音声に含まれる言語情報と非言語情報の関係という切り口から検討した．項目(3)では，視覚呈示される非言語情報と聴覚呈示される言語情報の関係に着目し，顔の表情と魅力が音声言語理解に及ぼす影響について検討した．実験では視線計測も併用し，表情の種類によって顔の注視部位がどのように変化し，それがどのように課題成績に影響を及ぼすのかを分析した．
実験の結果，発話者が喜び顔であり，かつ観察者が発話者の口元を注視している場合に文章理解が促進された．音声の感情情報処理が音声言語の理解・記憶に及ぼす影響（項目1），および音声の魅力情報処理が音声言語の理解・記憶に及ぼす影響（項目2）は妨害的なものであった．これに対して本年度の結果からは，顔の表情の視覚情報処理が音声言語の理解・記憶に及ぼす影響は促進的であることが示された．
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
当初予定していた実験を完了し,次の実験に向けた準備も順調に進展している.
|
| Strategy for Future Research Activity |
おおむね予定通り進展しているため,これまでと同様の方針で研究を進める.
|
| Causes of Carryover |
平成29年度は実験の実施と詳細な解析を予定していた．実験は予定通り実施したが，実験で得られた結果（課題正答率）は当初の仮説に反して，顔の表情が言語理解に促進的に影響するとの結果であった．この結果は表情そのものによる効果なのか，表情に付随した音声によるものなのかの切り分けが現時点ではできていない．そこで，視線データの詳細な解析は次年度に回し，まずはこの点を検討するために，平成30年度に追加実験を実施することとした．そのため次年度使用額が発生した．
平成30年度は，平成29年度の実験で使用した動画の音声のみの提示で同様の課題をおこなう．次年度使用額は，実験補助とデータ解析に関わる人件費に使用する．
|
Research Products
(4 results)
