• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

マルチモーダル議論マップの開発と議論内容理解に基づく評価支援

研究課題

研究課題/領域番号 17H01840
研究種目

基盤研究(B)

配分区分補助金
応募区分一般
研究分野 学習支援システム
研究機関九州工業大学

研究代表者

嶋田 和孝  九州工業大学, 大学院情報工学研究院, 教授 (50346863)

研究分担者 齊藤 剛史  九州工業大学, 大学院情報工学研究院, 准教授 (10379654)
研究期間 (年度) 2017-04-01 – 2020-03-31
研究課題ステータス 完了 (2019年度)
配分額 *注記
15,600千円 (直接経費: 12,000千円、間接経費: 3,600千円)
2019年度: 4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2018年度: 5,980千円 (直接経費: 4,600千円、間接経費: 1,380千円)
2017年度: 5,460千円 (直接経費: 4,200千円、間接経費: 1,260千円)
キーワードマルチモーダル / 言語処理 / 画像処理 / 自然言語処理
研究成果の概要

近年,複数人による議論の分析は,企業での会議だけではなく,PBLに代表される教育の現場でも重要になりつつある.しかしながら,円滑で満足のいく議論・意思決定をおこなうには,適切な議事進行をおこなえるファシリテーター(司会者)の存在が不可欠である.議論中の実際の対話の流れから適切なファシリテーション技術のルール化をおこない,それを機械化したデジタルファシリテーターの実現を目指す.
作成したコーパスに基づき,ファシリテーターの振る舞いをモデル化した.モデル化の際には言語情報のみではなく,音声や画像を考慮したマルチモーダルなモデル化を実現した.その他,議論参加者の振る舞いなどについても分析をした.

研究成果の学術的意義や社会的意義

本研究では,コーパス(言語資源)の構築を進めてきた.これまでの自然言語処理の研究結果を踏まえ,各発話の役割を人手で割り当てるなどの作業をした.このコーパスは無償で利用できるように申請者のWebページで公開している.このコーパスは類似した研究を進める他の研究者にとっても役に立つであろう.
計算機による円滑な議論支援のために,実際の対話でリーダシップを取った参加者の行動を機械学習によってモデル化し,議論を通したリーダの振る舞いやリーダとして発言すべきタイミングの検出モデルなどを構築した.また言語的な情報だけではなく,音声や画像を利用したマルチモーダル情報理解をした点も大きな成果である.

報告書

(4件)
  • 2019 実績報告書   研究成果報告書 ( PDF )
  • 2018 実績報告書
  • 2017 実績報告書
  • 研究成果

    (28件)

すべて 2020 2019 2018 2017 その他

すべて 雑誌論文 (1件) (うち査読あり 1件、 オープンアクセス 1件) 学会発表 (23件) (うち国際学会 11件) 備考 (3件) 産業財産権 (1件)

  • [雑誌論文] スポーツ要約生成におけるテンプレート型手法とニューラル型手法の提案と比較2018

    • 著者名/発表者名
      田川 裕輝 and 嶋田 和孝
    • 雑誌名

      自然言語処理

      巻: 25 ページ: 357-393

    • NAID

      130007531035

    • 関連する報告書
      2018 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] 複数人対話における話題を蒸し返す話者の推定2020

    • 著者名/発表者名
      米満 駿甫, 嶋田 和孝
    • 学会等名
      火の国シンポジウム2020, C5-3, 2020
    • 関連する報告書
      2019 実績報告書
  • [学会発表] マルチモーダル情報を考慮した議論の取りまとめ役推定2020

    • 著者名/発表者名
      本多 幸希, 塩田 宰, 嶋田 和孝, 齊藤 剛史
    • 学会等名
      電子情報通信学会 言語理解とコミュニケーション研究会, NLC2019-41, pp. 27-32, 2020
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 説得力分析に向けた複数人ディベートコーパスの構築2020

    • 著者名/発表者名
      塩田 宰, 嶋田 和孝
    • 学会等名
      電子情報通信学会 言語理解とコミュニケーション研究会, NLC2019-36, pp. 1-6, 2020.
    • 関連する報告書
      2019 実績報告書
  • [学会発表] Timing Prediction of Facilitating Utterance in Multi-party Conversation2019

    • 著者名/発表者名
      Tomonobu Sembokuya and Kazutaka Shimada
    • 学会等名
      Proceedings of PACLING 2019
    • 関連する報告書
      2019 実績報告書
    • 国際学会
  • [学会発表] 複数人対話における取りまとめ発話のタイミング予測2019

    • 著者名/発表者名
      仙北谷 知将, 嶋田 和孝
    • 学会等名
      火の国情報シンポジウム2019
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Tatara: 支援機能を持ったアノテーションツールの構築2019

    • 著者名/発表者名
      山村 崇, 嶋田 和孝, 吉川 和, 岩倉 友哉
    • 学会等名
      言語処理学会第25回年次大会(NLP2019)
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Image-based Attention Level Estimation of Interaction Scene by Head Pose and Gaze Information2018

    • 著者名/発表者名
      Rinko Komiya, Takeshi Saitohy and Kazutaka Shimada
    • 学会等名
      the 17th IEEE/ACIS International Conference on Computer and Information Science (ICIS 2018)
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Annotation and Analysis of Extractive Summaries for the Kyutech Corpus2018

    • 著者名/発表者名
      Takashi Yamamura and Kazutaka Shimada
    • 学会等名
      the 11th edition of the Language Resources and Evaluation Conference
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Discussion map with an assistant function for decision-making: a tool supporting consensus-building2018

    • 著者名/発表者名
      Ryunosuke Kirikihira and Kazutaka Shimada
    • 学会等名
      the tenth International Conference on Collaboration Technologies (CollabTech 2018)
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Analysis of facilitators' behaviors in multi-party conversations for constructing a digital facilitator system2018

    • 著者名/発表者名
      Tsukasa Shiota, Takashi Yamamura and Kazutaka Shimada
    • 学会等名
      the tenth International Conference on Collaboration Technologies (CollabTech 2018)
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Dialogue Act Annotation and Identification in a Japanese Multi-party Conversation Corpus2018

    • 著者名/発表者名
      Takashi Yamamura, Masato Hino and Kazutaka Shimada
    • 学会等名
      Asia-Pacific Corpus Linguistics Conferenc (APCLC2018)
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Construction of a Liar Corpus and Detection of Lying Situations2018

    • 著者名/発表者名
      Shohei Takabatake, Kazutaka Shimada and Takeshi Saitoh
    • 学会等名
      SCIS-ISIS 2018
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Kyutech コーパスにおけるアノテーションツールの試作2018

    • 著者名/発表者名
      山村 崇, 嶋田 和孝
    • 学会等名
      情報処理学会 九州支部 若手の会セミナー
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Sarcasm detection Using Features Based on Indicator and Roles2018

    • 著者名/発表者名
      Satoshi Hiai and Kazutaka Shimada
    • 学会等名
      the 3rd International Conference on Soft Computing and Data Mining 2018 (SCDM 2018)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] 複数人議論における取りまとめ役の分類と特徴の分析2018

    • 著者名/発表者名
      塩田 宰, 山村 崇, 嶋田 和孝
    • 学会等名
      言語処理学会第24回年次大会(NLP2018)
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 視線情報を用いた対話シーンにおける注目度推定2018

    • 著者名/発表者名
      小宮 凜子,齊藤 剛史,嶋田 和孝
    • 学会等名
      火の国情報シンポジウム2018
    • 関連する報告書
      2017 実績報告書
  • [学会発表] Simple and sophisticated inning summary generation based on encoder-decoder model and transfer learning2017

    • 著者名/発表者名
      Yuuki Tagawa and Kazutaka Shimada
    • 学会等名
      the 21st International Conference on Asian Language Processing (IALP)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Image-based Attention Estimation for Interaction Scene2017

    • 著者名/発表者名
      Rinko Komiya, Takeshi Saitoh, and Kazutaka Shimada
    • 学会等名
      International Conference on Information and Communication Technology Robotics (ICT-ROBOT2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Head Pose Estimation Using Convolutional Neural Network2017

    • 著者名/発表者名
      Seungsu Lee and Takeshi Saitoh
    • 学会等名
      7th iCatse International Conference on IT Convergence and Security (ICITCS2017)
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Kyutechコーパスを対象にした対話行為推定2017

    • 著者名/発表者名
      日野 優登, 山村 崇, 嶋田 和孝
    • 学会等名
      第4回自然言語処理シンポジウム,
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 嘘つきコーパスの構築と分析2017

    • 著者名/発表者名
      高畠 匠平, 嶋田 和孝
    • 学会等名
      HCGシンポジウム2017,
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 複数人対話における議論の取りまとめ役の推定2017

    • 著者名/発表者名
      塩田 宰, 山村 崇, 嶋田 和孝
    • 学会等名
      第25回電子情報通信学会九州支部 学生会講演会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 画像処理技術を用いた対話シーンにおける注目度推定2017

    • 著者名/発表者名
      小宮 凜子,齊藤 剛史,嶋田 和孝
    • 学会等名
      第16回情報科学技術フォーラム(FIT2017)
    • 関連する報告書
      2017 実績報告書
  • [備考] 九州工業大学・嶋田研究室・公開資源

    • URL

      http://www.pluto.ai.kyutech.ac.jp/~shimada/resources.html

    • 関連する報告書
      2019 実績報告書
  • [備考] 嶋田研究室:ツールや資源

    • URL

      http://www.pluto.ai.kyutech.ac.jp/~shimada/resources.html

    • 関連する報告書
      2018 実績報告書
  • [備考] Kyutechコーパス

    • URL

      http://www.pluto.ai.kyutech.ac.jp/~shimada/resources.html

    • 関連する報告書
      2017 実績報告書
  • [産業財産権] 読唇装置及び読唇方法2019

    • 発明者名
      齊藤剛史
    • 権利者名
      齊藤剛史
    • 産業財産権種類
      特許
    • 産業財産権番号
      2019-213234
    • 出願年月日
      2019
    • 関連する報告書
      2019 実績報告書

URL: 

公開日: 2017-04-28   更新日: 2021-02-19  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi