2017 Fiscal Year Research-status Report
視覚障害者の映像鑑賞における音声合成利用の可能性と新展開
| Project/Area Number |
17K01553
|
|---|
| Research Institution | Akita University |
|---|
Principal Investigator |
中島 佐和子 秋田大学, 理工学研究科, 助教 (40453542)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
大河内 直之 東京大学, 先端科学技術研究センター, 特任研究員 (30361679)
水戸部 一孝 秋田大学, 理工学研究科, 教授 (60282159)
|
|---|
| Project Period (FY) |
2017-04-01 – 2020-03-31
|
| Keywords | バリアフリー / 視覚障害者 / 音声ガイド / 音声合成 / 映画・映像 / メディア / ポーズ |
|---|
| Outline of Annual Research Achievements |
初年度は、研究開発の要点を得るために、視覚障害者および映画製作者や音声ガイド制作者へのヒヤリングからスタートした。視覚障害者を対象に合成音声とナレーターによる肉声の音声ガイド(本編音を含まない)の聞き取り実験を実施したところ、音声ガイドにおけるポーズ(無音区間)長の重要性が指摘された。また、映画製作者と音声ガイド制作者へのヒヤリングから、従来の音声ガイド台本では音声ガイド提示タイミングは1秒刻みで設定されており(調査を継続中)、映画の本編音(セリフ、環境音、音楽など)や登場人物の行動や場面展開に合わせた微妙な音声ガイド提示タイミングの調整はナレーターが担ってきたことがわかった。音声合成を用いた音声ガイド制作においては、質の確保や向上だけでなく、時間的また金銭的なコスト削減の視点も忘れてはならない。音声ガイド提示タイミングの調整をナレーターに頼れない分、音声ガイド台本制作時やスタジオ調整時にいかにスムーズにタイミング調整を行えるかは重要な課題と考えた。そこで若年晴眼者を対象とした予備実験により、合成音声と肉声を用いて、セリフや環境音の発生と音声ガイド提示の時間差を-2秒から+2秒の間で5条件設定し、聞きやすさや状況のイメージし易さなどの観点から音声ガイド提示タイミングの最適値を評価した。実際の映画館での映画鑑賞状況を想定して映画本編音はスピーカーから音声ガイドはイヤホンから提示し、セリフおよび環境音と音声ガイド1文からなる短い提示条件(6から8秒)で評価した。結果、本条件では必ずしも肉声の評価が合成音声の評価を上回る訳ではなく、合成音声と肉声とで最適な音声ガイド提示タイミングが異なった。そこで後半では、音声ガイドの提示タイミングの設定や調整を研究開発の重要項目の一つと定め、音声合成を用いた音声ガイド制作ソフトを試作し、音声ガイド制作者と視覚障害者による評価実験の準備を進めた。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
初年度の研究計画のうち、合成音声と肉声に対する認知特性の違いを活かした『合成音声を用いた音声ガイド提示手法』と『音声合成を用いた音声ガイド制作支援システム』の検討については、視覚障害者および映画製作者や音声ガイド制作者に対する聞き取り調査や評価、および、若年晴眼者を対象とした予備実験を通じて、開発要素を定量的に検討することができた。そのうち『音声合成を用いた音声ガイド制作支援システム』については試作に至り、スムーズに“視覚障害者の聴覚特性を活かした音声合成による映画鑑賞支援システムの開発”の準備を進めることができたと考える。
|
| Strategy for Future Research Activity |
初年度に試作した『音声合成を用いた音声ガイド制作支援システム』を実際の音声ガイド制作に用いることで、音声ガイド提示タイミングの決定や調整における課題と改善策をメインに制作フロー全体への影響も踏まえ、合成音声の利用による効果や具体的課題を得る。その上で、視覚障害者を対象とした合成音声と肉声の聞き取り実験により、開発要素を絞り込む。これにより、合成音声でも聞きやすい音声ガイドの開発方法を定める予定である。
|
| Causes of Carryover |
初年度はソフトの試作や若年晴眼者を対象とした予備実験に重点を置いたため、初年度に予定していた視覚障害者を対象とした実験を次年度に移行した。また、『音声合成を用いた音声ガイド制作支援システム』の試作準備として予定していた支出も、初年度終了時までは、PCやソフトウェア購入や開発の外部委託に際する大きな出費の必要が生じなかった。そのため次年度使用額が生じた。なお、それらについては次年度の早い段階で使用する予定である。
|
