オーディオ・ヴィジュアル・メディアによる音楽聴取行動における視覚と聴覚の相互作用

1992 Fiscal Year Annual Research Report

• Project/Area Number: 04236211
• Research Institution: 九州芸術工科大学
• Principal Investigator: 岩宮 眞一郎 九州芸術工科大学, 芸術工学部, 助教授 (60112356)
• Keywords: オーディオ・ヴィジュアル・メディア / 視覚と聴覚の相互作用 / 音楽 / 映像 / 協合 / 共鳴 / 音質 / 大画面

Research Abstract

本研究は、音楽再生音の印象に対する映像の影響、並びに、映像の印象に対する音楽再生音の影響を調べ、オーディオ・ヴィジュアル(AV)・メディアを通して音楽を聴くときに、情緒的な側面に、どのような視覚と聴覚の相互作用が生じているのかを検討したものである。種々の条件下で検討を行い、音と映像が重畳することで、音楽及び映像の総合的な評価が高まる、協合的な相互作用、明るい音が映像の印象を明るくするように、聴覚的印象が視覚的印象を強調する、共鳴現象などの相互作用が観測された。さらに、実際のAVメディアにおいて問題となる、音や映像の再生系の特性の違いが、視覚と聴覚の相互作用に及ぼす影響について、検討を行った。まず、再生音の音質の影響について検討するため、音響再生系を帯域制限した場合の、音楽再生音の印象に対する映像の影響を求めた。帯域制限によって、再生音の音質は劣化するが、映像を付加することで、あたかも、音質の劣化が補償されるような効果が認められた。この効果は、視覚情報が、帯域制限による音質の劣化に対する、聴覚系の感受性を鈍くする働きによるものと考えられる。さらに、再生画面の大きさが視覚と聴覚の相互作用に及ぼす影響について検討した。映像の再生には、投射形の液晶ヴィジョンを用い、45インチと90インチの再生画面の条件で、実験を行った。映像の印象の総合的評価に関しては、90インチの再生画面で、音楽と映像を重畳したときに、評価は最も高くなっている。大画面で、音と映像が重畳することによって、映像の芸術的価値は、最も高められるのである。音楽再生音の印象に関しては、いずれの条件においても、音と映像の重畳が音楽を印象的なものにする、協合的相互作用がみられるが、90インチの場合のほうが、その効果が顕著であった。つまり、大画面による映像は、音楽の芸術的価値をより高める効果を有しているのである。

Research Products

• [Publications] 岩宮 眞一郎: "オーディオ・ヴィジュアル・メディアによる音楽聴取行動における視覚と聴覚の相互作用" 日本音響学会誌. 48. 146-153 (1992)
• [Publications] 岩宮 眞一郎: "オーディオ・ヴィジュアル・メディアを通しての情報伝達における視覚と聴覚の相互作用に及ぼす音と映像の調和の影響" 日本音響学会誌. 48. 649-657 (1992)
• [Publications] Shin-ichiro Lwamiya Tomohiro Obita Kaori Yamashita: "The interaction between anditory and visual processing when listening to music via audio-visual media,-The effect of the matching of sound and video,and sound quality of sound-reproduction system-" Proc.of International Symposium of Musical Acoustics. 211-214 (1992)
• [Publications] 岩宮 眞一郎: "視覚と聴覚の相互作用に覚ぼす音響再生系の音質の影響-オーディオ信号に帯域制限を加えた場合-" JAS journal. 33. 29-35 (1993)