• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2018 年度 実績報告書

マルチモーダル議論マップの開発と議論内容理解に基づく評価支援

研究課題

研究課題/領域番号 17H01840
研究機関九州工業大学

研究代表者

嶋田 和孝  九州工業大学, 大学院情報工学研究院, 准教授 (50346863)

研究分担者 齊藤 剛史  九州工業大学, 大学院情報工学研究院, 准教授 (10379654)
研究期間 (年度) 2017-04-01 – 2020-03-31
キーワードマルチモーダル / 言語処理 / 画像処理
研究実績の概要

平成30年度は,以下の点について研究を進めた.
(1)コーパスの改良:コーパスの構築には多大なコストがかかる.そのコストを軽減するために,トピックや対話行為などのタグ付け(アノテーション)を支援する環境の構築を進めた.アノテーション支援の際に機械学習によるフィードバックモデルを組み込み,どの程度の精度が得られれば,アノテーション精度が向上するかなどについて、様々な視点から実験的に考察した.
(2)議論マップを用いた支援機能の有効性検証:議論マップを用いて,特定のトピックについて議論させ,その議論中にそれぞれの考えや場の総意を可視化する技術について研究し,その有効性を検証した.
(3)顔向きおよび視線情報,表情の分析:複数人対話環境を対象とし,各対話参加者の注意方向を推定する技術や表情の分析ついて,平成29年度に引き続き研究を進めた.
(4)ファシリテーターのモデル化:本申請課題の最終的な目的は,デジタルファシリテーターを実現することにある.昨年度は大局的な視点からのファシリテーターの行動を分析し,モデル化した.一方で,実際にデジタルファシリテーターで議論を制御するには具体的にどのようなタイミングで議論に介入するべきかを判断する必要がある.そこで,既存のコーパスを用い,機械学習によって議論を取りまとめるタイミングの予測モデルを構築し,その有効性を検証した.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

コーパスへのアノテーション支援ツールを実装した.Kyutechコーパスに関するアノテーション実験によって,一定の有効性と今後の課題が確認できた.議論マップを用いた情報の可視化や議論へのフィードバック機能を実装し,検証することで,その有効性も確認できた.マルチモーダル化に向けて,表情や視線検出・分析技術の研究も着実に進んでいる.デジタルファシリテーターのための議論介入タイミング予測モデルを構築し,その有効性も検証できており,研究は順調に進んでいるといえる.

今後の研究の推進方策

議論マップから得られた場の状態から受動的な支援をする枠組みは実装されている.また,デジタルファシリテーターの大局的な視点からの振る舞いや介入タイミングのモデルについても考察している.これらの知見を踏まえて,能動的な議論マップからの議論支援手法について考察する.
また,対話における人の振る舞いなどについてさらに詳細に分析し,議論支援システムの枠組みに組み込むことを検討する.
コーパス作成支援ツールのプロトタイプが完成しており,このツールを有効利用したコーパスの拡充を進め,より質の高い議論コーパスを構築し,一般公開することを目指す.

  • 研究成果

    (11件)

すべて 2019 2018 その他

すべて 雑誌論文 (1件) (うち査読あり 1件、 オープンアクセス 1件) 学会発表 (9件) (うち国際学会 6件) 備考 (1件)

  • [雑誌論文] スポーツ要約生成におけるテンプレート型手法とニューラル型手法の提案と比較2018

    • 著者名/発表者名
      田川 裕輝 and 嶋田 和孝
    • 雑誌名

      自然言語処理

      巻: 25 ページ: 357-393

    • 査読あり / オープンアクセス
  • [学会発表] 複数人対話における取りまとめ発話のタイミング予測2019

    • 著者名/発表者名
      仙北谷 知将, 嶋田 和孝
    • 学会等名
      火の国情報シンポジウム2019
  • [学会発表] Tatara: 支援機能を持ったアノテーションツールの構築2019

    • 著者名/発表者名
      山村 崇, 嶋田 和孝, 吉川 和, 岩倉 友哉
    • 学会等名
      言語処理学会第25回年次大会(NLP2019)
  • [学会発表] Image-based Attention Level Estimation of Interaction Scene by Head Pose and Gaze Information2018

    • 著者名/発表者名
      Rinko Komiya, Takeshi Saitohy and Kazutaka Shimada
    • 学会等名
      the 17th IEEE/ACIS International Conference on Computer and Information Science (ICIS 2018)
    • 国際学会
  • [学会発表] Annotation and Analysis of Extractive Summaries for the Kyutech Corpus2018

    • 著者名/発表者名
      Takashi Yamamura and Kazutaka Shimada
    • 学会等名
      the 11th edition of the Language Resources and Evaluation Conference
    • 国際学会
  • [学会発表] Discussion map with an assistant function for decision-making: a tool supporting consensus-building2018

    • 著者名/発表者名
      Ryunosuke Kirikihira and Kazutaka Shimada
    • 学会等名
      the tenth International Conference on Collaboration Technologies (CollabTech 2018)
    • 国際学会
  • [学会発表] Analysis of facilitators' behaviors in multi-party conversations for constructing a digital facilitator system2018

    • 著者名/発表者名
      Tsukasa Shiota, Takashi Yamamura and Kazutaka Shimada
    • 学会等名
      the tenth International Conference on Collaboration Technologies (CollabTech 2018)
    • 国際学会
  • [学会発表] Dialogue Act Annotation and Identification in a Japanese Multi-party Conversation Corpus2018

    • 著者名/発表者名
      Takashi Yamamura, Masato Hino and Kazutaka Shimada
    • 学会等名
      Asia-Pacific Corpus Linguistics Conferenc (APCLC2018)
    • 国際学会
  • [学会発表] Construction of a Liar Corpus and Detection of Lying Situations2018

    • 著者名/発表者名
      Shohei Takabatake, Kazutaka Shimada and Takeshi Saitoh
    • 学会等名
      SCIS-ISIS 2018
    • 国際学会
  • [学会発表] Kyutech コーパスにおけるアノテーションツールの試作2018

    • 著者名/発表者名
      山村 崇, 嶋田 和孝
    • 学会等名
      情報処理学会 九州支部 若手の会セミナー
  • [備考] 嶋田研究室:ツールや資源

    • URL

      http://www.pluto.ai.kyutech.ac.jp/~shimada/resources.html

URL: 

公開日: 2019-12-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi