聴解から読解への移行過程の解明とその支援：視聴覚メディアによる学習効果の検討から

• Project/Area Number: 12J07995
• Research Category: Grant-in-Aid for JSPS Fellows
• Allocation Type: Single-year Grants
• Section: 国内
• Research Field: Educational psychology
• Research Institution: Tokyo Woman's Christian University
• Principal Investigator: 髙橋 麻衣子 (2013-2015) 東京女子大学, 現代教養学部, 特別研究員(PD); 高橋 麻衣子 (2012) 東京女子大学, 現代教養学部, 特別研究員(PD)
• Project Period (FY): 2012-04-01 – 2016-03-31
• Project Status: Completed (Fiscal Year 2015)
• Budget Amount: ¥3,886,024 (Direct Cost: ¥3,496,942、Indirect Cost: ¥389,082); Fiscal Year 2015: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000); Fiscal Year 2014: ¥256,024 (Direct Cost: ¥196,942、Indirect Cost: ¥59,082); Fiscal Year 2013: ¥1,100,000 (Direct Cost: ¥1,100,000); Fiscal Year 2012: ¥1,100,000 (Direct Cost: ¥1,100,000)
• Keywords: 読解 / 聴解 / 視聴覚言語処理 / 表情 / ICT教育 / 読解過程 / 音声言語理解 / 表情認知 / モダリティ効果

Outline of Annual Research Achievements

本研究の大きな目的は，児童・生徒の学習効率を最大限に引き上げる視聴覚メディアの在り方についての基礎的知見を提供することである。今年度も昨年度に引き続き，文字情報だけでなく音声や表情といった付加的な情報を同時に提示できる視聴覚メディアの在り方を提案すべく2つの実証研究を行なった。
研究1では，視覚的な文字情報にそれを読み上げた音声情報を付与することが読解行動と理解成績に与える影響を検討した。36名の成人の参加者に，視覚的な情報のみ提示する黙読条件，音声情報を付与する音読条件と読み聞かせ条件の3つの条件下で説明的文章を読ませ，読解中の眼球運動と読解成績を測定した。その結果，黙読条件の読解成績が最も高いことが示され，成人の読み手にとっては文字情報に付与された音声情報が理解を妨げる可能性があることが指摘された。さらに各条件での読解活動中の眼球運動を分析したところ，文章読解中の視線の停留回数や停留時間は黙読条件で最も少なく，音読条件で最も多いこと，読み聞かせ条件の眼球運動は黙読条件のものに類似していることが示された。これらの結果は，成人の読み手は文字に音声情報が付与されていても，視覚的な文字情報をメインに処理して読解を行なっていることを示唆している。読みに熟達すると読み上げ音声が邪魔になる可能性があり，電子教科書の音声読み上げ機能は使用者の読解能力によって調整できるようにする必要があることが提案できた。
研究2では，文字の音声情報だけでなくそれを読み上げる話者の表情動画を付与した場合，発話内容の理解にどのような影響があるのかを検討した。36名の成人を対象とした実験の結果，発話者の声の感情よりも表情そのものが受け手の理解に寄与することが示され，インターネットを介した会議などでの話者の顔の表示がコミュニケーションを円滑にする可能性が示された。

Research Progress Status

27年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

27年度が最終年度であるため、記入しない。

Research Products

• [Journal Article] 会話の理解を促進する表情と注視位置の検討 (2015)
  • Author(s): 髙橋麻衣子・髙木幸子・田中章浩
  • Journal Title: 電子情報通信学会技術研究報告 Volume: 115 Pages: 19-24
  • Open Access
• [Journal Article] 読解活動における眼球運動の役割 : 黙読時と音読時の比較から (2013)
  • Author(s): 髙橋麻衣子・清河幸子
  • Journal Title: 認知科学 Volume: 20 Pages: 470-480
  • NAID: 130004722188
  • Peer Reviewed
• [Journal Article] 発話内容の理解における発話者の表情の影響 (2013)
  • Author(s): 髙橋麻衣子, 髙木幸子, 田中章浩
  • Journal Title: 電子情報通信学会技術研究報告 Volume: HIP2013-45 Pages: 61-66
• [Journal Article] 人はなぜ音読をするのか―読み能力の発達における音読の役割― (2013)
  • Author(s): 高橋麻衣子
  • Journal Title: 教育心理学研究 Volume: 61(印刷中)
  • NAID: 130003376586
  • Peer Reviewed
• [Journal Article] タブレットPCをベースにしたデジタル教科書による小学生の読解学習支援―読みパターンのログの分析から― (2012)
  • Author(s): 高橋麻衣子、巖淵守、中邑賢龍
  • Journal Title: 電子情報通信学会技術研究報告 Volume: 112 Pages: 223-228
  • NAID: 110009569758
• [Journal Article] 読解能力の発達における読み聞かせの有用性:聴解と読解での理解成績とわかりやすさ評定の比較から (2012)
  • Author(s): 高橋麻衣子
  • Journal Title: 読書化学 Volume: 54 Pages: 89-102
  • NAID: 130007603772
  • Peer Reviewed
• [Presentation] 説明的文章の理解における最適な視聴覚提示タイミングの検討 (2015)
  • Author(s): 髙橋麻衣子・田中章浩
  • Organizer: 日本認知科学会第32回大会
  • Place of Presentation: 千葉大学（千葉県千葉市）
  • Year and Date: 2015-09-18
• [Presentation] Optimal Timing of Audio-Visual Text Presentation: The Role of Attention. (2015)
  • Author(s): Maiko Takahashi，Akihiro Tanaka
  • Organizer: The 1st Joint Conference on Facial Analysis, Animation and Auditory-Visual Speech Processing
  • Place of Presentation: Kardinal Konig Haus（ウィーン，オーストリア）
  • Year and Date: 2015-09-11
  • Int'l Joint Research
• [Presentation] 会話の理解を促進する表情と注視位置の検討 (2015)
  • Author(s): 髙橋麻衣子・髙木幸子・田中章浩
  • Organizer: 電子情報通信学会2015ヒューマン情報処理研究会
  • Place of Presentation: 九州産業大学（福岡県福岡市）
  • Year and Date: 2015-07-18
• [Presentation] 発話者の表情が観察者の文章理解と眼球運動に及ぼす影響 (2015)
  • Author(s): 髙橋麻衣子・髙木幸子・田中章浩
  • Organizer: 日本認知科学会 知覚と行動モデリング研究分科会ワークショップ
  • Place of Presentation: 東京女子大学（東京都・杉並区）
  • Year and Date: 2015-03-14
• [Presentation] 表情と同時に提示された音声刺激が感情判断時の注視位置に及ぼす影響 (2013)
  • Author(s): 高橋麻衣子、高木幸子、田中章浩
  • Organizer: 第4回多感覚研究会
  • Place of Presentation: 文部科学省研究交流センター(茨城県)
  • Year and Date: 2013-01-22
• [Presentation] 説明的文章の理解における提示モダリティの効果 (2013)
  • Author(s): 髙橋麻衣子, 田中章浩
  • Organizer: 日本認知科学会第30回大会
  • Place of Presentation: 玉川大学(東京都)
• [Presentation] Integration of Text and Speech Information during Audio-visual Presentation. (2013)
  • Author(s): Maiko Takahashi, Akihiro Tanaka
  • Organizer: 9th International Conference on Cognitive Science
  • Place of Presentation: Hilton Kuching Hotel, Malaysia
• [Presentation] 発話内容の理解における発話者の表情の影響 (2013)
  • Author(s): 髙橋麻衣子, 髙木幸子, 田中章浩
  • Organizer: 電子情報通信学会2013ヒューマン情報処理研究会
  • Place of Presentation: 新潟国際情報大学(新潟県)
• [Presentation] The effects of articulation on eye-movement while reading text. (2013)
  • Author(s): Aiko Morita, Maiko Takahashi
  • Organizer: The 13th European Congress of Psychology
  • Place of Presentation: Stockholmsmassan, Sweden
• [Presentation] 児童の読解活動中の眼球運動―黙読と音読の比較から― (2012)
  • Author(s): 高橋麻衣子
  • Organizer: 日本教育心理学会第54回総会
  • Place of Presentation: 琉球大学(沖縄県)
  • Year and Date: 2012-11-23
• [Presentation] 読み書きの特別支援教育における支援技術利用の在り方(3)～移行支援の観点から見た支援技術利用～(自主企画シンポジウム、話題提供) (2012)
  • Author(s): 高橋麻衣子
  • Organizer: 日本LD学会第21回大会
  • Place of Presentation: 仙台国際センター(宮城県)
  • Year and Date: 2012-10-08
• [Presentation] 我が国におけるデジタル教科書・教材の可能性～LDの子どもにとってのわかりやすさとは～(大会企画シンポジウム、話題提供) (2012)
  • Author(s): 高橋麻衣子
  • Organizer: 日本LD学会第21回大会
  • Place of Presentation: 仙台国際センター(宮城県)
  • Year and Date: 2012-10-06
• [Presentation] Cognitive process of the children with reading difficulties:Analysis of the reading patterns with customizable digital reading software. (2012)
  • Author(s): Maiko Takahashi, Mamoru Iwabuchi, Kenryu Nakamura
  • Organizer: The annual meeting of the Cognitive Science Society
  • Place of Presentation: Sapporo Convention Center, Japan
  • Year and Date: 2012-08-02