• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

音声映像合成モデルによる英語情動学習支援システム開発のための研究

研究課題

研究課題/領域番号 19509003
研究種目

基盤研究(C)

配分区分補助金
応募区分一般
研究分野 知能情報学
研究機関中部大学

研究代表者

ヤーッコラ伊勢井 敏子  中部大学, 人文学部, 教授 (00454364)

研究分担者 広瀬 啓吉  東京大学, 情報理工学系研究科, 教授 (50111472)
森島 繁生  早稲田大学, 理工学術院, 教授 (10200411)
研究期間 (年度) 2007 – 2008
研究課題ステータス 完了 (2008年度)
配分額 *注記
3,630千円 (直接経費: 3,300千円、間接経費: 330千円)
2008年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
2007年度: 2,200千円 (直接経費: 2,200千円)
キーワード英語 / 情動・感情 / 学習支援システム / 音声映像 / 音声合成・顔合成 / 韻律 / 学習者 / 音声 / 映像 / 声合成・顔合成
研究概要

情動認知に関しては, 文化差(同時に母語の言語系統の差)が関係し, また, 情動・感情ごとに差異があるということも判明した。情動の認知結果と物理音響特性(距離)の相関に関しては, 基本周波数よりも音圧の方がより相関が高いことも分かった。顔合成と音声との同期は極めて難しい課題であることがわかった。時間変化と音声の変化および顔の変化をすべて統合して合成することは現在の技術では不可能に近いことが判明した。

報告書

(3件)
  • 2008 実績報告書   研究成果報告書 ( PDF )
  • 2007 実績報告書
  • 研究成果

    (34件)

すべて 2009 2008 2007

すべて 雑誌論文 (23件) (うち査読あり 8件) 学会発表 (11件)

  • [雑誌論文] 音と同期した3DCGを用いた日本人英語学習者に苦手な構音運動のためのトレーニングシステム-唇の突き出し2009

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子, 鈴木茂樹, 広瀬啓吉, 森島繁生
    • 雑誌名

      日本音響学会秋季大会講演論文集

      ページ: 369-370

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] 英語情動文"I love you"の中国語話者による認知と音響特性相関(2)2009

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子, 広瀬啓吉, 森島繁生
    • 雑誌名

      日本音響学会秋季大会講演論文集

      ページ: 483-484

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] 3Dフォルマント母音図における発声母音のリアルタイム可視化2009

    • 著者名/発表者名
      佐伯拓郎, 中貴俊, ヤーッコラ伊勢井敏子, 遠藤守, 山田雅之, 宮崎慎也
    • 雑誌名

      情報・システム講演論文集 1

      ページ: 169-169

    • NAID

      110007094687

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] CGキャラクタの存在感2009

    • 著者名/発表者名
      森島繁生
    • 雑誌名

      日本バーチャルリアリティ学会誌, 特集アンドロイドやエージェントに感じる人の存在感 vol.14 No.1(招待論文)

      ページ: 23-28

    • NAID

      10024785695

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] 英語情動文“I love you"の中国語話者による認知と音響特性相関(2)2009

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子, 広瀬啓吉, 森島繁生
    • 雑誌名

      日本音響学会春季大会講演論文集

      ページ: 483-484

    • 関連する報告書
      2008 実績報告書
  • [雑誌論文] 音と同期した3DCGを用いた日本人英語学習者に苦手な構音運動のためのトレーニングシステムー唇の突き出し2009

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子, 鈴木茂樹, 広瀬啓吉, 森島繁生
    • 雑誌名

      日本音響学会春季大会講演論文集

      ページ: 369-370

    • 関連する報告書
      2008 実績報告書
  • [雑誌論文] 英語音声教育のための3DCGによる舌の動きと音声のリンク開発の試み-語彙との同期-2008

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子, 鈴木茂樹, 森島繁生, 広瀬啓吉
    • 雑誌名

      映像メディア学会技術報告, ITE Technical Report Vol.32, No.15

      ページ: 29-32

    • 関連する報告書
      2008 研究成果報告書
    • 査読あり
  • [雑誌論文] フォルマント母音図の3D可視化の試み2008

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子, 中貴俊
    • 雑誌名

      日本音響学会春季大会講演論文集

      ページ: 435-536

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] 英語流音学習のための音と同期した3DCGによる構音運動2008

    • 著者名/発表者名
      鈴木茂樹, ヤーッコラ伊勢井敏子, 森島繁生, 広瀬啓吉
    • 雑誌名

      日本音響学会秋季大会講演論文集

      ページ: 339-340

    • 関連する報告書
      2008 実績報告書 2008 研究成果報告書
  • [雑誌論文] 英語情動文"I love you"の中国語話者による認知と音響特性相関(1)2008

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子, 広瀬啓吉, 森島繁生
    • 雑誌名

      日本音響学会秋季大会講演論文

      ページ: 331-332

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] 目標言語母音達成のための3Dフォルマント母音図における母音二重表示2008

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子, 中貴俊, 広瀬啓吉
    • 雑誌名

      日本音響学会秋季大会講演論文集

      ページ: 317-318

    • 関連する報告書
      2008 実績報告書 2008 研究成果報告書
  • [雑誌論文] Corpus-based synthesis of mandarin speech with F0 contours generated by superposing tone components on rule-generated phrase components2008

    • 著者名/発表者名
      Keikichi Hirose, Qinghua Sun, and Nobuaki Minematsu
    • 雑誌名

      Proceedings IEEE Workshop on Spoken Language Technology

      ページ: 33-36

    • 関連する報告書
      2008 研究成果報告書
    • 査読あり
  • [雑誌論文] Corpus-based generation of F_0 contours of Japanese based on the generation process model and its control for prosodic focus2008

    • 著者名/発表者名
      Keikichi Hirose, Keiko Ochi, and Nobuaki Minematsu
    • 雑誌名

      Proceedings of 9^<th> International Conference on Signal Processing (ICSP2008), Beijing(Invited, Special Session)

      ページ: 647-650

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] Speech prosody in spoken language technologies2008

    • 著者名/発表者名
      Keikichi Hirose
    • 雑誌名

      Journal of Signal Processing Vol.12, No.1(Invited Paper)

      ページ: 7-16

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] 顔表情のCG合成と感動評価2008

    • 著者名/発表者名
      森島繁生
    • 雑誌名

      映像情報メディア学会誌, 小特集今"顔"が面白い-顔の画像処理とその応用- Vol.62, No.12(招待論文)

    • NAID

      110006991083

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] Dive into the Movie -Audience-driven Immersive Experience in the Story-2008

    • 著者名/発表者名
      Shigeo Morishima
    • 雑誌名

      IEICE TRANSACTIONS on Information and systems, Special Section on Human Communication III Vol.E91-D, No.6(招待論文)

      ページ: 1594-1603

    • NAID

      10026804028

    • 関連する報告書
      2008 研究成果報告書
  • [雑誌論文] 英語情動文“1 love you"の中国語話者による認知と音響特性相関(1)2008

    • 著者名/発表者名
      ヤーツコラ伊勢井敏子, 広瀬啓吉, 森島繁生
    • 雑誌名

      日本音響学会秋季大会講演論文集

      ページ: 331-332

    • 関連する報告書
      2008 実績報告書
  • [雑誌論文] A computer graphic three-dimensional tongue and lip movement synchronized with English fricatives for Japanese learners2008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola, Shige ki Suzuki, Shigeo Morishima, Keikichi Hirose
    • 雑誌名

      The Journal of Acoustical Society of America Vol. 124, No. 4, Pt. 2 of 2

      ページ: 2594-2594

    • 関連する報告書
      2008 実績報告書
    • 査読あり
  • [雑誌論文] 英語音声教育のための3DCGによる舌の動きと音声のリンク開発の試み-語彙との同期2008

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子
    • 雑誌名

      映像メディア学会技術報告 32-15

      ページ: 29-32

    • 関連する報告書
      2007 実績報告書
    • 査読あり
  • [雑誌論文] フォルマント母音図の3D可視化の試み2008

    • 著者名/発表者名
      ヤーッコラ伊勢井敏子
    • 雑誌名

      日本音響学会春季大会論文集 CD-ROM

      ページ: 435-436

    • 関連する報告書
      2007 実績報告書
    • 査読あり
  • [雑誌論文] Japanese prominence with different focus in affirmative sentences realised by Finnish L22007

    • 著者名/発表者名
      Toshiko Isei-Jaakkola, Martti Vainio, and Keikichi Hirose
    • 雑誌名

      Proceedings of International Conference on Speech and Computer, Moscow

      ページ: 787-792

    • 関連する報告書
      2008 研究成果報告書
    • 査読あり
  • [雑誌論文] Corpus-based generation of prosodic features from text based on generation process model2007

    • 著者名/発表者名
      Keikichi Hirose, Keiko Ochi, and Nobuaki Minematsu
    • 雑誌名

      Proceedings Interspeech 2007, Antwerp

      ページ: 1274-1277

    • 関連する報告書
      2008 研究成果報告書
    • 査読あり
  • [雑誌論文] Japanese prominence with different focus in affirmative sentences realised by Finnish L22007

    • 著者名/発表者名
      Toshiko Isei-Jaakkola
    • 雑誌名

      Proceedings of International Conference on Speech and Computer Moscow 2007 CD-ROM

    • 関連する報告書
      2007 実績報告書
    • 査読あり
  • [学会発表] 3D Representations of English Monophthongs2008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola
    • 学会等名
      the 9th Joint Seminar on English Phonetics
    • 発表場所
      Seoul National Univ., SOUTH KOREA
    • 年月日
      2008-03-25
    • 関連する報告書
      2008 研究成果報告書
  • [学会発表] 3D Representations of English Monophthongs2008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola
    • 学会等名
      第9回日韓合同英語音声学ソウルセミナー
    • 発表場所
      韓国ソウル国立大学
    • 年月日
      2008-03-25
    • 関連する報告書
      2007 実績報告書
  • [学会発表] Long vowel quantity in perception in Japanese2008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola
    • 学会等名
      Finnish and Czech, 5th Asia pacific Conference on Speech, Language and Hearing, Program & Abstracts
    • 発表場所
      The Univ. of Queensland, AUSTRALIA
    • 関連する報告書
      2008 研究成果報告書
  • [学会発表] A three-dimensional visualisation of monophthongs for L22008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola and Takatoshi Naka
    • 学会等名
      1st International Conference on Literature, Languages and Linguistics
    • 発表場所
      Athens, GREECE
    • 関連する報告書
      2008 研究成果報告書
  • [学会発表] A multilingual 3D vowel chart for monophthongs based on formants2008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola, Takatoshi Naka and Keikichi Hirose
    • 学会等名
      Nordic Prosody X Abstracts
    • 発表場所
      Univ. of Helsinki, FINLAND
    • 関連する報告書
      2008 研究成果報告書
  • [学会発表] A computer graphic three-dimensional tongue and lip movement synchronized with English fricatives for Japanese learners2008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola, Shigeki Suzuki, Shigeo Morishima and Keikichi Hirose
    • 学会等名
      156th Meeting of Acoustical Society of America, The Journal of Acoustical Society of America
    • 発表場所
      Florida, U.S.A.(Vol. 124, No.4)
    • 関連する報告書
      2008 研究成果報告書
  • [学会発表] Researches on speech prosody for advanced spoken language technologies2008

    • 著者名/発表者名
      Keikichi Hirose
    • 学会等名
      Proceedings of International Symposium : Frontiers of Research on Speech and Music (FRSM-2008), Kolkata(Invited Talk)
    • 発表場所
      Kolkata, INDIA
    • 関連する報告書
      2008 研究成果報告書
  • [学会発表] Generation of F_0 contours for Mandarin speech in combination with rule-based and corpus-based methods2008

    • 著者名/発表者名
      Keikichi Hirose, Qinghua Sun, and Nobuaki Minematsu
    • 学会等名
      Proceedings of 8^<th> Phonetics Conference of China (PCC2008)/International Symposium on Phonetic Frontiers, Beijing(Invited)
    • 発表場所
      Beijing, CHINA
    • 関連する報告書
      2008 研究成果報告書
  • [学会発表] Synthesis of F_0 contours for Mandarin speech by superposing corpus-generated tone contours on rule-generated phrase components2008

    • 著者名/発表者名
      Keikichi Hirose, Qinghua Sun, and Nobuaki Minematsu
    • 学会等名
      Proceedings of Speech Analysis, Synthesis and Recognition -Application in Systems for Homeland Security-, Piechowice, Poland(Plenary talk)
    • 発表場所
      Piechowice, POLAND
    • 関連する報告書
      2008 研究成果報告書
  • [学会発表] A multilingual 3D vowel chart for monophthongs based on forman ts2008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola, Takato shi Naka, Keikichi Hirose
    • 学会等名
      Nordic Prosody X
    • 発表場所
      Helsinki, FINLAND
    • 関連する報告書
      2008 実績報告書
  • [学会発表] A three-dimensional visualisation of monophthongs for L22008

    • 著者名/発表者名
      Toshiko Isei-Jaakkola, Ta katoshi Naka
    • 学会等名
      1st International Conference on Literature, Languages and Linguistics
    • 発表場所
      Athens, GREECE.
    • 関連する報告書
      2008 実績報告書

URL: 

公開日: 2007-04-01   更新日: 2016-04-21  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi