マルチメディアコーパスと確率モデルを利用したマルチモーダル対話制御に関する研究

• 研究課題/領域番号: 18500115
• 研究種目: 基盤研究(C)
• 配分区分: 補助金
• 応募区分: 一般
• 研究分野: 知能情報学
• 研究機関: 九州工業大学
• 研究代表者: 遠藤 勉 九州工業大学, 大学院・情報工学研究院, 教授 (10112294)
• 研究分担者: 嶋田 和孝 九州工業大学, 大学院・情報工学研究院, 助教 (50346863)
• 研究期間 (年度): 2006 – 2008
• 研究課題ステータス: 完了 (2008年度)
• 配分額: 2,730千円 (直接経費: 2,400千円、間接経費: 330千円); 2008年度: 650千円 (直接経費: 500千円、間接経費: 150千円); 2007年度: 780千円 (直接経費: 600千円、間接経費: 180千円); 2006年度: 1,300千円 (直接経費: 1,300千円)
• キーワード: 自然言語処理 / マルチモーダル対話 / 人工知能 / ジェスチャ認識 / 確率モデル / 機械学習 / 音声認識 / コーパス / コーパス分析 / コーパス作成支援 / 文脈情報処理 / 概念ネットワーク / 音声理解 / 発話意図認識 / 知識獲得 / 感情分類 / 発話意図推定 / 対話型インタフェース / 表データ / マルチメディアコーパス

研究概要

音声発話とジェスチャを併用して対話のできるシステムを目指して, 人間の行う対話データやジェスチャデータを収集し, 人手による解析(タグ付け)を行った。これらのデータ(コーパス)を利用して, 音声認識ソフトウェアの認識精度の向上, 対話における発話意図の推定, ハンドジェスチャの認識等を行うプログラムを開発し, 画面上で写真を操作するインタフェースや対話型病名診断システムに適用して, その有効性を確認した。

研究成果

• [雑誌論文] A Graph-based Approach for Sentiment Sentence Extraction (2009)
  • 著者名/発表者名: Kazutaka Shimada, Daigo HashTsutomu Endo
  • 雑誌名: New Frontiers in Applied Data Mining Vol.5433 ページ: 38-48
  • 査読あり
• [雑誌論文] A Graph-based Approach for Sentiment Sentence Extraction (2009)
  • 著者名/発表者名: Kazutaka Shimada, Daigo Hashimoto, Tsutomu Endo
  • 雑誌名: New Frontiers in Applied Data Mining 5433 ページ: 38-48
  • 査読あり
• [雑誌論文] Sayaka Minewaki, Speech Understanding Based on Keyword Extraction and Relations between Words (2007)
  • 著者名/発表者名: Kazutaka Shimada, Tsutomu Endo
  • 雑誌名: Computational Intelligence Vol.23, No.1 ページ: 45-60
  • 査読あり
• [雑誌論文] Speech Understanding Based on Keyword Extraction and Relations Between Words (2007)
  • 著者名/発表者名: Kazutaka Shimada, Tsutomu Endo and Sayaka Minewaki
  • 雑誌名: Computational Intelligence 23 ページ: 45-60
  • 査読あり
• [雑誌論文] 対話システムにおけるユーザの発話意図推定 (2007)
  • 著者名/発表者名: 岩下薫, 嶋田和孝, 遠藤勉
  • 雑誌名: 火の国シンポジウム2007 (CD-ROM)
• [雑誌論文] マルチモーダル対話のための当部ジェスチャ認識 (2007)
  • 著者名/発表者名: 田中太喜, 嶋田和孝, 遠藤勉
  • 雑誌名: 火の国シンポジウム2007 (CD-ROM)
• [雑誌論文] 製品選択におけるグラフ主導型ナビゲーションシステムの構築 (2007)
  • 著者名/発表者名: 桑原健, 嶋田和孝, 遠藤勉
  • 雑誌名: 火の国シンポジウム2007 (CD-ROM)
• [雑誌論文] 対話履歴と事例に基づく発話意図の推定 (2006)
  • 著者名/発表者名: 岩下薫, 嶋田和孝, 遠藤勉
  • 雑誌名: FIT2006 第5回情報科学技術フォーラム ページ: 159-160
• [雑誌論文] USBカメラを用いた指先インタフェース (2006)
  • 著者名/発表者名: 本田和久, 嶋田和孝, 遠藤勉
  • 雑誌名: 第14回電子情報通信学会九州支部学生会講演論文集 ページ: 32-32
• [雑誌論文] Table Recognition Using Attribute Likelihood Computed from Words (2006)
  • 著者名/発表者名: T.Kitayama, K.Shimada, T.Endo
  • 雑誌名: Fourth Workshop on Learning with Logics and Logics for Learning (LLLL2006) ページ: 49-52
• [学会発表] タグ付けツールによる評判情報コーパスの作成支援 (2009)
  • 著者名/発表者名: 唯野良介, 嶋田和孝, 遠藤勉
  • 学会等名: 情報処理学会第71回全国大会
  • 発表場所: 滋賀県
  • 年月日: 2009-03-10
• [学会発表] Recurrent Neural Network Classifier for Three Layer Conceptual Network and Performance Evaluation (2008)
  • 著者名/発表者名: Md. Khalilur Rhaman, Tsutomu Endo
  • 学会等名: The 11th International Conference on Computer and Information TechnologyThe 11th International Conference on Computer and Information Technology
  • 発表場所: Bangladesh
  • 年月日: 2008-12-27
• [学会発表] Recurrent Neural Network Classifier for Three Layer Conceptual Network and Performance Evaluation (2008)
  • 著者名/発表者名: Md. Khalilur Rhaman, Tsutomu Endo
  • 学会等名: The llth International Conference on Computer and Information Technology(ICCIT 2008)
  • 発表場所: バングラデシュ
  • 年月日: 2008-12-27
• [学会発表] Sentiment Sentence Extraction Using a Hierarchical Directed Acyclic Graph Structure and a Bootstrap Approach (2008)
  • 著者名/発表者名: Kazutaka Shimada, Daigo Hashimoto, Tsutomu Endo
  • 学会等名: The 22nd Pacific Asia Conference on Language, Information and Computation(PACLIC22)
  • 発表場所: フィリピン
  • 年月日: 2008-11-20
• [学会発表] USBカメラとマーカを用いたハンドジェスチヤ認識 (2008)
  • 著者名/発表者名: 武藤亮介, 嶋田和孝, 遠藤勉
  • 学会等名: 第16回電子情報通信学会九州支部学生会講演会
  • 発表場所: 大分県
  • 年月日: 2008-09-26
• [学会発表] タグ付けされた評価表現の分析ツールの開発 (2008)
  • 著者名/発表者名: 唯野良介, 嶋田和孝, 遠藤勉
  • 学会等名: 第16回電子情報通信学会九州支部学生会講演会
  • 発表場所: 大分県
  • 年月日: 2008-09-26
• [学会発表] Three Layer Conceptual Network Dialog Processor (2008)
  • 著者名/発表者名: Md. Khalilur Rhaman, Tsutomu Endo
  • 学会等名: The Twelfth IASTED International Conference on Artificial Intelligence and Sof Computing
  • 発表場所: Spain
  • 年月日: 2008-09-02
• [学会発表] THREE LAYER CONCEPTUAL NETWORK DIALOG PROCESSOR (2008)
  • 著者名/発表者名: Md. Khalilur Rhaman, Tsutomu Endo
  • 学会等名: The Twelfth IASTED International Conference on Artificial Intelligence and Soft Computing (ASC 2008)
  • 発表場所: スペイン
  • 年月日: 2008-09-02
• [学会発表] Seeing several stars : a rating inference task for a document containing several evaluation criteria (2008)
  • 著者名/発表者名: Kazutaka Shimada, Tsutomu Endo
  • 学会等名: The 12th Pacific-Asia Conference on Knowledge Discovery and Data Mining
  • 発表場所: 大阪
  • 年月日: 2008-05-23
• [学会発表] Seeing several stars : a rating inference task for a document containing several evaluation criteria (2008)
  • 著者名/発表者名: Kazutaka Shimada, Tsutomu Endo
  • 学会等名: The 12th Pacific-Asia Conference on Knowledge Discovery and Data Mining (PAKDD 2008)
  • 発表場所: 大阪府
  • 年月日: 2008-05-23
• [学会発表] A Graph-based Approach for Sentiment Sentence Extraction (2008)
  • 著者名/発表者名: Kazutaka Shimada, Daigo Hashimoto, Tsutomu Endo
  • 学会等名: The first International Workshop on Algorithms for Large-Scale Information Processing in Knowledge Discovery(ALSIP 2008)
  • 発表場所: 大阪府
  • 年月日: 2008-05-20
• [学会発表] 階層非循環有向グラフを用いた文章の類似度に基づく評価文抽出 (2008)
  • 著者名/発表者名: 橋本大吾, 嶋田和孝, 遠藤勉
  • 学会等名: 言語処理学会第14回年次大会
  • 発表場所: 東京
  • 年月日: 2008-03-20
• [学会発表] 階層非循環有向グラフを用いた文章の類似度に基づく評価文抽出 (2008)
  • 著者名/発表者名: 橋本 大吾, 嶋田 和孝, 遠藤 勉
  • 学会等名: 言語処理学会第14回年次大会論文集
  • 発表場所: 東京
  • 年月日: 2008-03-20
• [学会発表] Movie Review Classification Based on a Multiple Classifier (2007)
  • 著者名/発表者名: Kimitaka Tsutsmi, Kazutaka Shimada and Tsutomu Endo
  • 学会等名: Proceedings of the 21st Pacific Asia Conference on Language, Information and Computation(PACLIC21)
  • 発表場所: ソウル
  • 年月日: 2007-11-01
• [学会発表] Seeing several stars: レビュー中の複数の評価値を推定するタスク (2007)
  • 著者名/発表者名: 嶋田 和孝
  • 学会等名: NLP若手の会 第2回シンポジウム
  • 発表場所: 東京
  • 年月日: 2007-09-28
• [学会発表] A case study of comparison of several methods for corpus-based speech intention identification (2007)
  • 著者名/発表者名: Kazutaka Shimada, Kaoru Iwashit Tsutomu Endo
  • 学会等名: The 10th Conference of the Pacific Association for Computational Linguistics
  • 発表場所: Australia
  • 年月日: 2007-09-21
• [学会発表] A case study of comparison of several methods for corpus-based speech intention identification (2007)
  • 著者名/発表者名: Kazutaka Shimada, Kaoru Iwashita and Tsutomu Endo
  • 学会等名: Proceedings of the 10th Conference of the Pacific Association for Computational Linguistics(PACLING2007)
  • 発表場所: メルボルン
  • 年月日: 2007-09-21
• [学会発表] 複数の評価項目を持つレビューの評価値の推定 (2007)
  • 著者名/発表者名: 堤 公孝, 嶋田 和孝, 遠藤 勉
  • 学会等名: 第21回人工知能学会全国大会
  • 発表場所: 宮崎
  • 年月日: 2007-06-20
• [学会発表] マルチモーダル対話のための頭部ジェスチャ認識 (2007)
  • 著者名/発表者名: 田中太喜, 嶋田和孝, 遠藤勉
  • 学会等名: 情報処理学会火の国情報シンポジウム2007
  • 発表場所: 鹿児島
  • 年月日: 2007-03-01
• [備考]
  • URL: http://www.pluto.ai.kyutech.ac.jp/~shimada/