6階層モデルに基づくマルチモーダル対話システムのフレームワーク構築と実装

2010 年度 研究成果報告書

• 研究課題/領域番号: 20700156
• 研究種目: 若手研究(B)
• 配分区分: 補助金
• 研究分野: 知覚情報処理・知能ロボティクス
• 研究機関: 豊橋技術科学大学
• 研究代表者: 桂田 浩一 豊橋技術科学大学, 国際交流センター, 講師 (80324490)
• 研究期間 (年度): 2008 – 2010
• キーワード: マルチモーダル対話 / 6層モデル / 標準化 / webベースシステム

研究概要

本研究ではマルチモーダル対話システムの6階層モデルを情報処理学会試行標準委員会の標準として取り纏め,公開を行った.また,6階層モデルに基づいたマルチモーダル対話システムのプロトタイプとして,一般的なWeb ブラウザからアクセス可能なマルチモーダル対話システムのプロトタイプを開発した.

研究成果

• [雑誌論文] Web-Based Lecture System Using Slide Sharing for Classroom Questions and Answers (2010)
  • 著者名/発表者名: Yurie Iribe, Hiroaki Nagaoka, Kouichi Katsurada, Tsuneo Nitta
  • 雑誌名: International Journal of Knowledge and Web Intelligence Vol.1 No.3/4 ページ: 243-255
• [学会発表] One-Model Speech Recognition and Synthesis Based on Articulatory Movement HMMs (2011)
  • 著者名/発表者名: Masashi Kimura, Takayuki Onoda, Yurie, Iribe, Kouichi Katsurada, Tsuneo Nitta
  • 学会等名: Proc. of NCSP11, pp.392-395
  • 年月日: 20110300
• [学会発表] 音声ドキュメント高速検索におけるクエリ分割とマッチング手法の比較検討 (2011)
  • 著者名/発表者名: 澤田心太, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: 日本音響学会 2011年春季研究発表会講演論文集,3-5-18
  • 年月日: 20110300
• [学会発表] 調音運動HMMによる少量音声サンプルからの音声合成 (2011)
  • 著者名/発表者名: 小野田高幸, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2011年春季研究発表会講演論文集,3-7-10
  • 年月日: 20110300
• [学会発表] 調音特徴を用いた確率モデルに基づくVAD (2011)
  • 著者名/発表者名: 佐々木俊, 木村優志, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2011年春季研究発表会講演論文集,1-5-14
  • 年月日: 20110300
• [学会発表] 調音運動HMMに基づく高精度音素認識の検討 (2011)
  • 著者名/発表者名: 荒木厚太, 小野田高幸, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2011年春季研究発表会講演論文集,1-5-2
  • 年月日: 20110300
• [学会発表] 高速音声ドキュメント検索における検索クエリ分割手法およびマッチング手法の比較評価 (2011)
  • 著者名/発表者名: 澤田心太, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: 第5回音声ドキュメント処理ワークショップ講演論文集
  • 年月日: 20110300
• [学会発表] One-Model Speech Recognition and Synthesis Based on Articulatory Movement HMMs (2010)
  • 著者名/発表者名: Tsuneo Nitta, Takayuki Onoda, Masashi Kimura, Yurie Iribe, Kouichi Katsurada
  • 学会等名: Proc. of INTERSPEECH2010, pp.2970-2973
  • 年月日: 20100900
• [学会発表] 調音運動HMM音声合成における調音と音源の改良 (2010)
  • 著者名/発表者名: 小野田高幸, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2010年秋季研究発表会講演論文集,2-Q-9
  • 年月日: 20100900
• [学会発表] 大規模音声ドキュメントからの高速キーワード検索法の提案とその評価 (2010)
  • 著者名/発表者名: 澤田心太, 桂田浩一, 新田恒雄, 入部百合絵, 手島茂樹
  • 学会等名: 日本音響学会 2010年秋季研究発表会講演論文集,2-9-10
  • 年月日: 20100900
• [学会発表] 調音特徴に基づく非母語話者の英語発音評価 (2010)
  • 著者名/発表者名: 森拓郎, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2010年秋季研究発表会講演論文集,3-1-3
  • 年月日: 20100900
• [学会発表] Facial Expression Mimicking System (2010)
  • 著者名/発表者名: Ryuichi Fukui, Kouichi Katsurada, Yurie Iribe, Tsuneo Nitta
  • 学会等名: Proc.of ICPR2010, pp.3776-3779
  • 年月日: 20100800
• [学会発表] 調音運動に基づくワンモデル音声認識合成へのCELP適用 (2010)
  • 著者名/発表者名: 木村優志, 小野田高幸, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 2010年度人工知能学会全国大会論文集,1J1-OS13-2
  • 年月日: 20100600
• [学会発表] 情景と音声言語の混在情報から得た部分空間に基づくタスク推定の改良 (2010)
  • 著者名/発表者名: 澤田心太, 木村優志, 桂田浩一, 新田恒雄
  • 学会等名: 2010年度人工知能学会全国大会論文集,1J1-OS13-10
  • 年月日: 20100600
• [学会発表] AAMを利用した表情成分抽出に基づく表情模倣システム (2010)
  • 著者名/発表者名: 福井竜一, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: 電子情報通信学会技術研究報告,PRMU2009-322,pp.513-518
  • 年月日: 20100300
• [学会発表] 柔軟なモジュール切替えを可能にしたWebベースMMIシステムの開発 (2010)
  • 著者名/発表者名: 工藤正志, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: 情報処理学会第72回全国大会論文集,5U-2
  • 年月日: 20100300
• [学会発表] AAMを利用した表情の模倣 (2010)
  • 著者名/発表者名: 福井竜一, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: 情報処理学会第72回全国大会論文集,4Y-5
  • 年月日: 20100300
• [学会発表] 調音特徴に基づく音素単位での英語発音誤り検出と発音評価 (2010)
  • 著者名/発表者名: 長岡紘昭, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 情報処理学会第72回全国大会論文集,1U-10
  • 年月日: 20100300
• [学会発表] 大規模音声データベースに対する高速なキーワード検索 (2010)
  • 著者名/発表者名: 手島茂樹, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: 日本音響学会 2010年春季研究発表会講演論文集,3-6-7
  • 年月日: 20100300
• [学会発表] 調音特徴抽出技術を用いた日本語発音学習 (2010)
  • 著者名/発表者名: 下田和樹, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2010年春季研究発表会講演論文集,3-7-6
  • 年月日: 20100300
• [学会発表] 情景と音声言語の混在情報から得た部分空間に基づくタスク推定 (2010)
  • 著者名/発表者名: 木村優志, 澤田心太, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2010年春季研究発表会講演論文集,3-6-3
  • 年月日: 20100300
• [学会発表] 顔まねエージェントシステム (2010)
  • 著者名/発表者名: 福井竜一, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: インタラクション2010,SA-08
  • 年月日: 20100300
• [学会発表] 英語発音学習のための調音特徴抽出と発音評価 (2010)
  • 著者名/発表者名: 長岡紘昭, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 情報処理学会研究報告2010-SLP-80,No.13
  • 年月日: 20100200
• [学会発表] 大規模音声ドキュメントを対象とした高速キーワード検索システムとその評価 (2010)
  • 著者名/発表者名: 手島茂樹, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 情報処理学会研究報告2010-SLP-80,No.11
  • 年月日: 20100200
• [学会発表] 階層型アーキテクチャに基づいたWebベースMMI システムの開発 (2010)
  • 著者名/発表者名: 工藤正志, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: 電子情報通信学会技術研究報告,SP2009-146,pp.351-356
  • 年月日: 20100100
• [学会発表] Web-based Lecture System using SlideShare for Questions and Answers in theclassroom (2009)
  • 著者名/発表者名: Yurie Iribe, Hiroaki Nagaoka, Kouichi Katsurada, Tsuneo Nitta
  • 学会等名: Proc.of ICCE2009, pp.638-642
  • 年月日: 20091200
• [学会発表] Development of a Toolkit for SpokenDialog Systems with anAnthropomorphic Agent : Galatea (2009)
  • 著者名/発表者名: Kouichi Katsurada, Akinobu Lee, Tatsuya Kawahara, Tatsuo Yotsukura, Shigeo Morishima, Takuya Nishimoto, Yoichi Yamashita, Tsuneo Nitta
  • 学会等名: Proc. of APSIPA09, pp.148-153
  • 年月日: 20091000
• [学会発表] 階層的MMIアーキテクチャに基づくプラットフォーム実装方法の検討 (2009)
  • 著者名/発表者名: 荒木雅弘, 西本卓也, 桂田浩一, 新田恒雄
  • 学会等名: 情報処理学会研究報告2010-SLP-78,No.5
  • 年月日: 20091000
• [学会発表] Fast Keyword Detection Using Suffix Array (2009)
  • 著者名/発表者名: Kouichi Katsurada, Shigeki Teshima, Tsuneo Nitta
  • 学会等名: Proc.of INTERSPEECH2009, pp.2147-2150
  • 年月日: 20090900
• [学会発表] Suffix Arrayを用いた高速なキーワード音声検索システム (2009)
  • 著者名/発表者名: 手島茂樹, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2009年秋季研究発表会講演論文集,1-R-26
  • 年月日: 20090900
• [学会発表] AAMを利用した顔画像処理における表情成分と個人成分の分離 (2009)
  • 著者名/発表者名: 福井竜一, 桂田浩一, 新田恒雄
  • 学会等名: 平成21年度電気関係学会東海支部連合大会講演論文集,O-207
  • 年月日: 20090900
• [学会発表] MMI6階層モデルに準拠したWebベースMMIシステムの開発 (2009)
  • 著者名/発表者名: 工藤正志, 桂田浩一, 入部百合絵, 新田恒雄
  • 学会等名: FIT2009情報科学技術フォーラム,E-039
  • 年月日: 20090900
• [学会発表] Suffix Arrayを用いた高速なキーワード検索 (2009)
  • 著者名/発表者名: 手島茂樹, 桂田浩一, 新田恒雄
  • 学会等名: 情報処理学会研究報告2009-SLP-77,No.3
  • 年月日: 20090700
• [学会発表] 調音運動HMMに基づくワンモデル音声認識合成 (2009)
  • 著者名/発表者名: 新田恒雄, 武井匠, 木村優志, 桂田浩一
  • 学会等名: 情報処理学会研究報告2009-SLP-77,No.4
  • 年月日: 20090700
• [学会発表] Q学習を用いた協調行動のための戦略獲得 (2009)
  • 著者名/発表者名: 溝口勇太, 木村優志, 桂田浩一, 新田恒雄
  • 学会等名: 2009年度人工知能学会全国大会論文集,1F2-OS7-11
  • 年月日: 20090600
• [学会発表] 情景と音声言語の混在情報から得た部分空間に基づくタスク推定 (2009)
  • 著者名/発表者名: 澤田心太, 木村優志, 入部百合絵, 桂田浩一, 新田恒雄
  • 学会等名: 2009年度人工知能学会全国大会論文集,1F2-OS7-7
  • 年月日: 20090600
• [学会発表] 調音特徴に基づく1-model音声認識-合成 (2009)
  • 著者名/発表者名: 武井匠, 木村優志, 桂田浩一, 新田恒雄
  • 学会等名: 2009年度人工知能学会全国大会論文集,1F2-OS7-6
  • 年月日: 20090600
• [学会発表] Distinctive Phonetic Feature(DPF)Based Phoneme Recognition Using MLNsand Inhibition/Enhancement Networkfor Noise Robust ASR (2009)
  • 著者名/発表者名: Mohammad Huda, Hiroaki Kawashima, Kouichi Katsurada, Tsuneo Nitta
  • 学会等名: Proc.of NCSP09, 1PM2-K3
  • 年月日: 20090300
• [学会発表] Suffix Arrayを用いた音声文書の高速全文検索 (2009)
  • 著者名/発表者名: 手島茂樹, 桂田浩一, 新田恒雄
  • 学会等名: 日本音響学会 2009年春季研究発表会講演論文集,2-5-2
  • 年月日: 20090300
• [学会発表] ウェブブラウザをインターフェースとしたマルチモーダル対話システム (2009)
  • 著者名/発表者名: 工藤正志, 桐畑輝樹, 高田淳貴, 桂田浩一, 新田恒雄
  • 学会等名: インタラクション2009,C15
  • 年月日: 20090300
• [学会発表] Suffix Arrayを用いた音声文書の高速検索 (2009)
  • 著者名/発表者名: 手島茂樹, 桂田浩一, 新田恒雄
  • 学会等名: 第3回音声ドキュメント処理ワークショップ講演論文集,pp.27-32
  • 年月日: 20090200
• [学会発表] 擬人化エージェントとの音声対話を実現するツールキットの開発 (2008)
  • 著者名/発表者名: 桂田浩一, 李晃伸, 河原達也, 四倉達夫, 西本卓也, 山下洋一, 新田恒雄
  • 学会等名: HAIシンポジウム2008,1C-1
  • 年月日: 20081200
• [学会発表] マルチモーダル情報処理の研究動向 (2008)
  • 著者名/発表者名: 田村哲嗣, 桂田浩一, 伊藤慶明
  • 学会等名: 電子情報通信学会技術研究報告,SP2008-72,pp.13-18
  • 年月日: 20081100
• [学会発表] A Browser-based Multimodal Interaction System (2008)
  • 著者名/発表者名: Kouichi Katsurada, Teruki Kirihata, Masashi Kudo, Junki Takada, Tsuneo Nitta
  • 学会等名: Proc.of ICMI'08, pp.195-196
  • 年月日: 20081000
• [学会発表] ウェブブラウザ上で動作可能なマルチモーダル対話システム (2008)
  • 著者名/発表者名: 桐畑輝樹, 工藤正志, 高田淳貴, 桂田浩一, 新田恒雄
  • 学会等名: 情報処理学会研究報告2008-SLP-73,pp.35-40
  • 年月日: 20081000
• [学会発表] 音声対話技術コンソーシアム(ISTC)の活動成果報告 (2008)
  • 著者名/発表者名: 山下洋一, 李晃伸, 河原達也, 四倉達夫, 西本卓也, 桂田浩一, 新田恒雄
  • 学会等名: 情報処理学会研究報告2008-SLP-73,pp.47-52
  • 年月日: 20081000
• [学会発表] Phoneme Recognition Based on Hybrid Neural Networks with Inhibition/Enhancement of Distinctive Phonetic Feature(DPF)Trajectories (2008)
  • 著者名/発表者名: Mohammad Nurul Huda, Kouichi Katsurada, Tsuneo Nitta
  • 学会等名: Proc.of INTERSPEECH2008, pp.1529-1532
  • 年月日: 20080900
• [学会発表] 発話シーンの共有信念に基づく推定とその評価 (2008)
  • 著者名/発表者名: 木村優志, 作元佑輔, 田口亮, 桂田浩一, 岩橋直人, 新田恒雄
  • 学会等名: 日本認知科学会第25回大会発表論文集,pp.318-319
  • 年月日: 20080900
• [学会発表] 人間-ロボット間の共有信念に基づく発話場面の推定 (2008)
  • 著者名/発表者名: 木村優志, 作元佑輔, 田口亮, 桂田浩一, 岩橋直人, 新田恒雄
  • 学会等名: 2008年度人工知能学会全国大会論文集,3E3-07
  • 年月日: 20080600
• [学会発表] 知的エージェント学習実験プラットフォームの構築 (2008)
  • 著者名/発表者名: 溝口勇太, 田口亮, 木村優志, 土井岡伴哉, 桂田浩一, 新田恒雄
  • 学会等名: 2008年度人工知能学会全国大会論文集,3E3-08
  • 年月日: 20080600
• [備考] ホームページ等
  • URL: http://www.itscj.ipsj.or.jp/ipsj-ts/ts0012/toc.htm
• [備考]
  • URL: http://www.vox.tutkie.tut.ac.jp/html/Introduction/pdf/press.pdf
• [産業財産権] 音声検索装置および音声検索方法 (2009)
  • 発明者名: 桂田浩一, 手島茂樹, 新田恒雄
  • 権利者名: 桂田浩一, 手島茂樹, 新田恒雄
  • 産業財産権番号: 特許,特願2009-44842
  • 出願年月日: 2009-02-26