• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2023 Fiscal Year Annual Research Report

自己視点・他者視点・固定視点映像の統合解析による人物行動センシング

Research Project

Project/Area Number 20H04205
Research InstitutionThe University of Tokyo

Principal Investigator

佐藤 洋一  東京大学, 生産技術研究所, 教授 (70302627)

Co-Investigator(Kenkyū-buntansha) 菅野 裕介  東京大学, 生産技術研究所, 准教授 (10593585)
Project Period (FY) 2020-04-01 – 2024-03-31
Keywords人物行動理解 / 一人称視点映像解析
Outline of Annual Research Achievements

本研究課題では、自己視点・他者視点・固定視点の異なる視点からの映像を統合解析による人物行動センシングに向けて、研究項目1.自己教師有り学習による複数視点映像の総合解析に適した特量表現学習、研究項目2.異なる視点の映像間でのアラインメント、研究項目3.自己視点映像と固定視点映像の統合による人物行動センシング、研究項目4.自己視点映像と他者視点映像の統合によるインタラクション解析、の4項目に取り組む。本年度は、これまで得られた研究項目1の成果を踏まえ、研究項目2.異なる視点の映像間でのアラインメント、研究項目3.自己視点映像と固定視点映像の統合による人物行動センシング、研究項目4.自己視点映像と他者視点映像の統合によるインタラクション解析のそれぞれに取
り組み成果を得た。

Research Progress Status

令和5年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和5年度が最終年度であるため、記入しない。

  • Research Products

    (10 results)

All 2023

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 1 results) Presentation (8 results) (of which Int'l Joint Research: 4 results)

  • [Journal Article] Semantic Image Segmentation by Dynamic Discriminative Prototypes2023

    • Author(s)
      Kaipeng Zhang and Yoichi Sato
    • Journal Title

      IEEE Transactions on Multimedia

      Volume: 26 Pages: 737 - 749

    • DOI

      10.1109/TMM.2023.3270637

    • Peer Reviewed
  • [Journal Article] Efficient Annotation and Learning for 3D Hand Pose Estimation: A Survey2023

    • Author(s)
      Takehiko Ohkawa, Ryosuke Furuta and Yoichi Sato
    • Journal Title

      International Journal of Computer Vision

      Volume: 131 Pages: 3193-3206

    • DOI

      10.1007/s11263-023-01856-0

    • Peer Reviewed / Open Access
  • [Presentation] Weakly Supervised Temporal Sentence Grounding with Uncertainty-Guided Self-training2023

    • Author(s)
      Yifei Huang, Lijin Yang, and Yoichi Sato
    • Organizer
      IEEE/CVF Conference on Computer Vision and Pattern Recognition
    • Int'l Joint Research
  • [Presentation] DeCo : Decomposition and Reconstruction for Compositional Temporal Grounding via Coarse-to-Fine Contrastive Ranking2023

    • Author(s)
      Lijin Yang, Quang Kong, Hsuan-Kung Yang, Wadim Kehl, Yoichi Sato, and Norimasa Kobori
    • Organizer
      IEEE/CVF Conference on Computer Vision and Pattern Recognition
    • Int'l Joint Research
  • [Presentation] FineBio: A Fine-Grained Video Dataset of Biological Experiments with Hierarchical Annotations2023

    • Author(s)
      Takuma Yagi, Misaki Ohashi, Yifei Huang, Ryosuke Furuta, Shungo Adachi, Toutai Mitsuyama, and Yoichi Sato
    • Organizer
      Joint International 3rd Ego4D and 11th EPIC Workshop
    • Int'l Joint Research
  • [Presentation] Proposal-based Temporal Action Localization with Point-level Supervision2023

    • Author(s)
      Yuan Yin, Yifei Huang, Ryosuke Furuta, and Yoichi Sato
    • Organizer
      British Machine Vision Conference
    • Int'l Joint Research
  • [Presentation] 大規模言語モデルを用いた学習カテゴリの自動決定による映像からのオープン語彙物体状態認識2023

    • Author(s)
      舘野将寿、八木拓真、古田諒佑、佐藤洋一
    • Organizer
      画像の認識・理解シンポジウム
  • [Presentation] 一人称視点映像を対象としたfew-shotアクティビティ認識2023

    • Author(s)
      佐藤禎哉、高木基宏、古田諒佑、菅野裕介、佐藤洋一
    • Organizer
      画像の認識・理解シンポジウム
  • [Presentation] FineBio: A Fine-Grained Video Dataset of Biological Experiments with Hierarchical Annotation2023

    • Author(s)
      八木 拓真, 大橋 実咲, 黄 逸飛, 古田 諒佑, 足達 俊吾, 光山 統泰, 佐藤 洋一
    • Organizer
      日本バイオインフォマティクス学会年会
  • [Presentation] FineBio:密な階層アノテーションを付与したバイオ実験映像データセット2023

    • Author(s)
      八木 拓真, 大橋 実咲, 黄 逸飛, 古田 諒佑, 足達 俊吾, 光山 統泰, 佐藤 洋一
    • Organizer
      日本分子生物学会年会

URL: 

Published: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi