Research on technological infrastructure for informal skill education across time and space

• Project/Area Number: 23H00488
• Research Category: Grant-in-Aid for Scientific Research (A)
• Allocation Type: Single-year Grants
• Section: 一般
• Review Section: Medium-sized Section 61:Human informatics and related fields
• Research Institution: The University of Tokyo
• Principal Investigator: 葛岡 英明 東京大学, 大学院情報理工学系研究科, 教授 (10241796)
• Co-Investigator(Kenkyū-buntansha): 松本 啓吾 筑波大学, システム情報系, 助教 (20909527) ; 角 康之 公立はこだて未来大学, システム情報科学部, 教授 (30362578) ; 小池 英樹 東京科学大学, 情報理工学院, 教授 (70234664) ; 佐藤 洋一 東京大学, 生産技術研究所, 教授 (70302627) ; 山下 直美 京都大学, 情報学研究科, 教授 (70396141) ; 鳴海 拓志 東京大学, 大学院情報理工学系研究科, 准教授 (70614353)
• Project Period (FY): 2023-04-01 – 2026-03-31
• Project Status: Granted (Fiscal Year 2025)
• Budget Amount: ¥47,320,000 (Direct Cost: ¥36,400,000、Indirect Cost: ¥10,920,000); Fiscal Year 2025: ¥14,820,000 (Direct Cost: ¥11,400,000、Indirect Cost: ¥3,420,000); Fiscal Year 2024: ¥15,210,000 (Direct Cost: ¥11,700,000、Indirect Cost: ¥3,510,000); Fiscal Year 2023: ¥17,290,000 (Direct Cost: ¥13,300,000、Indirect Cost: ¥3,990,000)
• Keywords: 技能教育 / インフォーマル学習 / 一人称視点 / 作業の分節化 / 一人称視点映像

Outline of Research at the Start

本研究の目的は、熟練者が非熟練者に教示をする場面の記録から効果的な技能学習が行われた際の発話や動作パターンを利用して、自動的に教示記録を分節化・ラベル付けして要約する手法を実現し、時空を超えた技能伝承を可能にすることである。作業者の頭部搭載カメラによる一人称視点映像を作業単位毎に分節化し、ラベルを付け、教示用コンテンツを生成する。分節化やラベル付けは未だ挑戦的だが、インフォーマル学習の特徴に着目することで解決を図る。ファブラボの機器操作の教示に応用し、有効性を実験と分析で確認する。