• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2023 Fiscal Year Annual Research Report

手順文書からの知識獲得

Research Project

Project/Area Number 20H04210
Research InstitutionKyoto University

Principal Investigator

森 信介  京都大学, 学術情報メディアセンター, 教授 (90456773)

Co-Investigator(Kenkyū-buntansha) 難波 英嗣  中央大学, 理工学部, 教授 (50345378)
亀甲 博貴  京都大学, 学術情報メディアセンター, 助教 (50827524)
山肩 洋子  東京大学, 情報基盤センター, 教授 (60423018)
Project Period (FY) 2020-04-01 – 2024-03-31
Keywords言語処理 / 画像認識 / 手順書 / 実施動画 / 生化学実験 / 実験室DX / 動作結果予測 / 作業支援
Outline of Annual Research Achievements

自然言語理解の課題に対して知識の重要性が指摘されている。
本研究では、対象を手順文書に限定し、(1) どの程度の量と質の知識が言語理解に有効か、(2) 有効であるといえる知識をどのように獲得するかという問いに取り組んだ。研究期間後半では、予定外ではあるが、知識表現として作業後の視覚的な状態を記述し、それを予測する課題を提案するとともに、解決方法の提案した。さらに、対象を Wet Lab. に拡張する取り組みを行い、知識の有用性を示すアプリケーションを構築し紹介した。

Research Progress Status

令和5年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和5年度が最終年度であるため、記入しない。

  • Research Products

    (5 results)

All 2024 2023

All Journal Article (1 results) (of which Peer Reviewed: 1 results,  Open Access: 1 results) Presentation (4 results) (of which Int'l Joint Research: 3 results)

  • [Journal Article] Recipe Generation from Unsegmented Cooking Videos2024

    • Author(s)
      Taichi Nishimura, Atsushi Hashimoto, Yoshitaka Ushiku, Hirotaka Kameko, Shinsuke Mori
    • Journal Title

      ACM Transactions on Multimedia Computing, Communications, and Applications

      Volume: 0 Pages: 0-0

    • Peer Reviewed / Open Access
  • [Presentation] Towards Flow Graph Prediction of Open-Domain Procedural Texts2023

    • Author(s)
      Keisuke Shirai, Hirotaka Kameko, Shinsuke Mori
    • Organizer
      CL, The 8th Workshop on Representation Learning for NLP
    • Int'l Joint Research
  • [Presentation] Open-Vocabulary Segmentation Approach for Transformer-Based Food Nutrient Estimation2023

    • Author(s)
      Satayu Parinayok, Yoko Yamakata, and Kiyoharu Aizawa
    • Organizer
      ACM International Conference on Multimedia in Asia
    • Int'l Joint Research
  • [Presentation] Automatic Dataset Creation from User-generated Recipes for Ingredient-centric Food Image Analysis2023

    • Author(s)
      Liangyu Wang, Yoko Yamakata, and Kiyoharu Aizawa
    • Organizer
      ACM International Conference on Multimedia in Asia
    • Int'l Joint Research
  • [Presentation] Automatic Generation of Explanatory Text from Flowchart Images in Patents2023

    • Author(s)
      Nanba, H., Kubo, S., and Fukuda, S
    • Organizer
      Workshop on Patent Text Mining and Semantic Technologies

URL: 

Published: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi