• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

証明論と型理論に基づく自然言語の形式意味論の新しい枠組み

Research Project

Project/Area Number 21K00016
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 01010:Philosophy and ethics-related
Research InstitutionKeio University

Principal Investigator

峯島 宏次  慶應義塾大学, 文学部(三田), 准教授 (80725739)

Project Period (FY) 2021-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2023: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2022: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2021: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Keywords型理論 / 証明論 / 自然言語推論 / 形式意味論 / 大規模言語モデル / 合成的意味論 / 範疇文法
Outline of Research at the Start

本研究は、現代論理学の形式的手法(特に証明論・型理論)を用いて自然言語の合成的意味論の枠組みを構築し、それを計算言語学の領域における自然言語推論(含意関係認識)の研究に応用可能な推論システムと結びつけることを目的とする。これにより、コーパス規模の実テキストを対象として形式意味論を構築し、自然言語推論を用いてその評価・比較・検証を行うことを目指す。

Outline of Annual Research Achievements

本研究は、形式意味論と現代論理学の証明論・型理論の手法を応用して、自然言語の合成的意味論の枠組みを構築し、計算言語学の領域における自然言語推論(含意関係認識)の研究にも利用可能な意味解析・推論システムを確立することを目的としている。本年度は、(1)形式意味論的な研究として、様々なタイプの疑問文を中心とする合成的意味論と論理推論の研究を行った。またそれと並行して、(2)自然言語推論の基礎的な研究として、記号的・論理的アプローチとニューラルネットワーク(深層学習)に基づくアプローチを体系的に比較する一連の研究を行った。(1)については、型理論に基づいて英語・日本語の自然言語文を高階論理の論理式に変換し、疑問表現を含む複雑な推論・質問応答を行うシステムを構築し、多様な言語現象に適用することを試みた。(2)については、まず深層学習モデルの推論性能を体系的に評価するため、基本的な量化推論、特に三段論法に着目した自然言語推論データセットを構築した。その上で、現状の大規模言語モデルを用いて一連の評価実験を行った。それにより、現状のモデルでは量化推論を含む論理推論に弱点があり、人間と同様の一定のエラー傾向(推論バイアス)があることを体系的に明らかにした。構築したデータセットは人間の推論能力との比較のもとで、大規模言語モデルを含む自然言語推論の計算モデルの推論能力をテストする言語資源として活用可能なものであり、今後公開する予定である。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

今年度の目標であった(1)自然言語の合成的意味論・推論システムの整備、及び、(2)量化推論を中心とした自然言語推論データセットの構築とそれを利用した深層学習モデルの体系的な評価はほぼ順調に進展した。(1)の成果は、12月に香港で開催されたPacific Asia Conference on Language, Information and Computation (PACLIC 37)において発表し、Proceedings論文を出版した。(2)については、 6月にフランスで開催されたNatural Logic Meets Machine Learning (NALOMA) ワークショップで発表し、Proceedings論文に成果をまとめた。これらの成果に基づく招待講演を3月にフランス・IHPSTで行い、さらに、形式意味論と深層学習の背景にある分布意味論を比較した招待講演を日本語文法学会で行った。また、深層学習に基づくアプローチと記号的アプローチを推論の体系性の観点から比較する展望論文を執筆し、雑誌『認知科学』に発表した。

Strategy for Future Research Activity

本年度に主に進めた合成的意味論・推論システムの構築とその自然言語推論への応用をさらに進める。特に高階論理の手法を中心に、自然言語推論のための証明システムの整備・拡張を進める。また、これまでに構築した自然言語推論データセットをさらに拡張すると同時に、データセットを活用して、深層学習モデルの推論能力の体系的な評価を行う手法の開発をさらに進める。

Report

(3 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • 2021 Research-status Report
  • Research Products

    (22 results)

All 2024 2023 2022 2021

All Journal Article (13 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 13 results,  Open Access: 12 results) Presentation (8 results) (of which Int'l Joint Research: 3 results,  Invited: 5 results) Funded Workshop (1 results)

  • [Journal Article] Do AIs obtain foundations of language? From the viewpoint of inferential systematicity2024

    • Author(s)
      谷中 瞳、峯島 宏次
    • Journal Title

      Cognitive Studies: Bulletin of the Japanese Cognitive Science Society

      Volume: 31 Issue: 1 Pages: 27-45

    • DOI

      10.11225/cs.2023.078

    • ISSN
      1341-7924, 1881-5995
    • Year and Date
      2024-03-01
    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Can Machines and?Humans Use Negation When Describing Images?2024

    • Author(s)
      Sato Yuri、Mineshima Koji
    • Journal Title

      Proceedings of 2nd International Conference on Human and Artificial Rationalities

      Volume: LNCS 14522 Pages: 39-47

    • DOI

      10.1007/978-3-031-55245-8_3

    • ISBN
      9783031552441, 9783031552458
    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] A Proof-Theoretic Approach to the Binding Problem2024

    • Author(s)
      Yukiko Yana, Koji Mineshima and Daisuke Bekki,
    • Journal Title

      Proceedings of 6th Asian Workshop on Philosophical Logic

      Volume: 0 Pages: 129-139

    • Related Report
      2023 Research-status Report
    • Peer Reviewed
  • [Journal Article] Computational Semantics and Evaluation Benchmark for Interrogative Sentences via Combinatory Categorial Grammar2023

    • Author(s)
      Hayate Funakura, Koji Mineshima
    • Journal Title

      Proceedings of the 37th Pacific Asia Conference on Language, Information and Computation

      Volume: 0 Pages: 764-774

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Evaluating Large Language Models with NeuBAROCO: Syllogistic Reasoning Ability and Human-like Biases2023

    • Author(s)
      Risako Ando, Takanobu Morishita, Hirohiko Abe, Koji Mineshima, Mitsuhiro Okada
    • Journal Title

      Proceedings of the 4th Natural Logic Meets Machine Learning Workshop

      Volume: 0 Pages: 1-11

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Can Negation Be Depicted? Comparing Human and Machine Understanding of Visual Representations2023

    • Author(s)
      Yuri Sato, Koji Mineshima, Kazuhiro Ueda
    • Journal Title

      Cognitive Science

      Volume: 47 Issue: 3

    • DOI

      10.1111/cogs.13258

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Implementing Natural Language Inference for Comparatives2023

    • Author(s)
      Izumi Haruta, Koji Mineshima, Daisuke Bekki
    • Journal Title

      Journal of Language Modelling

      Volume: 10 Issue: 1 Pages: 139-191

    • DOI

      10.15398/jlm.v10i1.294

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] Compositional Evaluation on Japanese Textual Entailment and Similarity2022

    • Author(s)
      Hitomi Yanaka, Koji Mineshima
    • Journal Title

      Transactions of the Association for Computational Linguistics

      Volume: 10 Pages: 1266-1284

    • DOI

      10.1162/tacl_a_00518

    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Visually Analyzing Universal Quantifiers in Photograph Captions2022

    • Author(s)
      Yuri Sato, Koji Mineshima
    • Journal Title

      Lecture Notes in Computer Science

      Volume: 13462 Pages: 373-377

    • DOI

      10.1007/978-3-031-15146-0_34

    • ISBN
      9783031151453, 9783031151460
    • Related Report
      2022 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Exploring Transitivity in Neural NLI Models through Veridicality2021

    • Author(s)
      Hitomi Yanaka, Koji Mineshima, and Kentaro Inui
    • Journal Title

      Proceedings of the 16th Conference of the European Chapter of the Association for Computational Linguistics (EACL2021)

      Volume: - Pages: 920-934

    • DOI

      10.18653/v1/2021.eacl-main.78

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] SyGNS: A Systematic Generalization Testbed Based on Natural Language Semantics2021

    • Author(s)
      Hitomi Yanaka, Koji Mineshima, and Kentaro Inui
    • Journal Title

      Findings of the Association for Computational Linguistics: ACL-IJCNLP 2021

      Volume: - Pages: 103-119

    • DOI

      10.18653/v1/2021.findings-acl.10

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] Assessing the Generalization Capacity of Pre-trained Language Models through Japanese Adversarial Natural Language Inference2021

    • Author(s)
      Hitomi Yanaka and Koji Mineshima
    • Journal Title

      Proceedings of BlackboxNLP 2021: Analyzing and interpreting neural networks for NLP

      Volume: - Pages: 337-349

    • DOI

      10.18653/v1/2021.blackboxnlp-1.26

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] The Proviso Problem from a Proof-Theoretic Perspective2021

    • Author(s)
      Yukiko Yana, Koji Mineshima, and Daisuke Bekki
    • Journal Title

      Proceedings of Logical Aspects of Computational Linguistics 2021 (LACL2021)

      Volume: -

    • Related Report
      2021 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] Is Reasoning Without Logic Viable? An Evaluation of Large Language Models using the NeuBAROCO dataset2024

    • Author(s)
      Koji Mineshima
    • Organizer
      IHPST Seminar
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] 言葉の意味をどのように説明するか―形式意味論と分布意味論を比較する観点から―2023

    • Author(s)
      峯島宏次
    • Organizer
      日本語文法学会第24回大会
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] 多言語に対応した汎用的な構成的意味論の計算フレームワークの構築2023

    • Author(s)
      峯島宏次、窪田悠介、宮尾祐介、窪田愛、船蔵颯
    • Organizer
      日本言語学会第166回大会
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] 逆接の推論関係に着目した日本語談話関係アノテーション2023

    • Author(s)
      窪田愛, 佐藤拓真, 天本貴之, 秋吉亮太, 峯島宏次
    • Organizer
      言語処理学会第29回年次大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 含意関係と感情極性は対立的談話関係を捉えられるか2023

    • Author(s)
      佐藤拓真, 窪田愛, 峯島宏次
    • Organizer
      言語処理学会第29回年次大会
    • Related Report
      2022 Research-status Report
  • [Presentation] Evaluating Compositionality in Japanese Textual Entailment2022

    • Author(s)
      Koji Mineshima
    • Organizer
      Workshop on Computational Linguistics on East Asian Languages, 29th International Conference on Head-Driven Phrase Structure Grammar (HPSG2022)
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] Natural Language Inference: A View from Logic and Formal Semantics2021

    • Author(s)
      Koji Mineshima
    • Organizer
      ILFC Seminar: interactions between formal and computational linguistics
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] Beyond the conceptual-procedural distinction2021

    • Author(s)
      Yuji Nishiyama and Koji Mineshima
    • Organizer
      The 17th International Pragmatics Conference (IPrA2021)
    • Related Report
      2021 Research-status Report
    • Int'l Joint Research
  • [Funded Workshop] 国際哲学人文学会議(CIPSH)国際学会2023

    • Related Report
      2023 Research-status Report

URL: 

Published: 2021-04-28   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi