• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

関係知識と非定形知識の利用を統合した自然言語読解システムの構築

Research Project

Project/Area Number 19J13238
Research Category

Grant-in-Aid for JSPS Fellows

Allocation TypeSingle-year Grants
Section国内
Review Section Basic Section 61030:Intelligent informatics-related
Research InstitutionTohoku University

Principal Investigator

鈴木 正敏  東北大学, 情報科学研究科, 特別研究員(DC2)

Project Period (FY) 2019-04-25 – 2021-03-31
Project Status Completed (Fiscal Year 2020)
Budget Amount *help
¥1,700,000 (Direct Cost: ¥1,700,000)
Fiscal Year 2020: ¥800,000 (Direct Cost: ¥800,000)
Fiscal Year 2019: ¥900,000 (Direct Cost: ¥900,000)
Keywords自然言語処理 / 知識処理 / 質問応答システム / 言語モデル / クイズ
Outline of Research at the Start

自然言語の文章を計算機に理解させるためには、文章に明記されない知識を用いて推論を行うことが必要である。本研究では、事物間の関係を記述した関係知識と、事物についての定義文や因果関係といった非定形知識(説明的知識)の両方を統合的に利用した自然言語理解のシステムを研究する。具体的には、関係知識と非定形知識を用いた読解問題に取り組み、大規模なデータセットを用いた読解モデルの訓練および評価が可能な枠組みの上で追究する。

Outline of Annual Research Achievements

ユーザの入力する質問に対して適切な答えを出力する質問応答システムは、自然言語処理技術の重要な応用問題として長年の研究が続けられている。近年では、深層学習技術の急速な進展を背景に、自然言語処理の各問題で深層学習を活用した新たな手法が提案されるようになり、質問応答システムの研究においても新たな問題設定や手法が提案されている。
研究員は本年度までに、質問応答システムの現代的な2つのアプローチである、与えられる文書を読解することによって質問の答えを導き出す「オープンブック質問応答」と、外部の文書や知識源を参照することなしに言語モデルが保持する知識のみを頼りに質問に答える「クローズドブック質問応答」のそれぞれについて研究を行った。オープンブック質問応答に対しては、従来の問題設定に存在していた「質問は与えられる文書の読解によって必ず解答できる」という仮定が、オープンブック質問応答の性能低下の要因となっていることに着目し、質問の解答可能性の判別を行う文書読解モデルを提案した。提案手法により構築した文章読解モデルを応用することにより、質問応答システムの解答抽出・解答統合の性能が向上することを実験により確認した。クローズドブック質問応答に対しては、既存手法で主流となっていたモデルの大型化に頼らずに、訓練データの工夫・拡張によって質問応答性能の向上を図るデータ指向の手法を提案した。提案手法では、百科事典の文章を利用して訓練データを拡張することにより、言語モデルの質問応答性能の向上を、従来手法よりも大幅に少ないパラメータ数で実現した。この結果は、言語モデルに世界知識(非定型知識)を効率的に持たせる方法について新たな知見をもたらすものである。
さらに本年度は、国内における質問応答システムの研究を促進するため、質問応答システムの評価型ワークショップを開催し、研究分野の発展への貢献を行った。

Research Progress Status

令和2年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和2年度が最終年度であるため、記入しない。

Report

(2 results)
  • 2020 Annual Research Report
  • 2019 Annual Research Report
  • Research Products

    (7 results)

All 2021 2020 2019 Other

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (4 results) Remarks (2 results)

  • [Journal Article] A Data-Oriented Approach for Closed-Book Question Answering2021

    • Author(s)
      鈴木 正敏, 松田 耕史, 大内 啓樹, 鈴木 潤, 乾 健太郎
    • Journal Title

      Journal of Natural Language Processing

      Volume: 28 Issue: 1 Pages: 3-25

    • DOI

      10.5715/jnlp.28.3

    • NAID

      130007998395

    • ISSN
      1340-7619, 2185-8314
    • Related Report
      2020 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] オープンドメイン質問応答における解答可能性判別の役割2021

    • Author(s)
      鈴木正敏, 松田耕史, 大内啓樹, 鈴木潤, 乾健太郎
    • Organizer
      言語処理学会 第27回年次大会 (NLP 2021)
    • Related Report
      2020 Annual Research Report
  • [Presentation] JAQKET: クイズを題材にした日本語QAデータセットの構築2020

    • Author(s)
      鈴木正敏, 鈴木潤, 松田耕史, 西田京介, 井之上直也
    • Organizer
      言語処理学会 第26回年次大会 (NLP 2020)
    • Related Report
      2019 Annual Research Report
  • [Presentation] クイズ解答タスクにおける大規模ラベルなしコーパスの利用: 言語モデルとデータ拡張2019

    • Author(s)
      鈴木正敏, 松田耕史, 大内啓樹, 鈴木潤, 乾健太郎
    • Organizer
      第14回NLP若手の会 シンポジウム (YANS 2019)
    • Related Report
      2019 Annual Research Report
  • [Presentation] クイズ解答タスクにおける大規模ラベルなしコーパスの利用: 言語モデルとデータ拡張2019

    • Author(s)
      鈴木正敏, 松田耕史, 大内啓樹, 鈴木潤, 乾健太郎
    • Organizer
      情報処理学会 第241回自然言語処理研究会 (IPSJ-SIGNL)
    • Related Report
      2019 Annual Research Report
  • [Remarks] AI王: クイズAI日本一決定戦

    • URL

      https://www.nlp.ecei.tohoku.ac.jp/projects/aio/

    • Related Report
      2020 Annual Research Report 2019 Annual Research Report
  • [Remarks] JAQKET:クイズを題材にした日本語QAデータセット

    • URL

      https://www.nlp.ecei.tohoku.ac.jp/projects/jaqket/

    • Related Report
      2019 Annual Research Report

URL: 

Published: 2019-05-29   Modified: 2024-03-26  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi