• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2021 Fiscal Year Annual Research Report

クラウド上の膨大な画像履歴情報を多様な時空間スケールで活用する超低品質画像の認識

Research Project

Project/Area Number 17H00745
Research InstitutionNagoya University

Principal Investigator

村瀬 洋  名古屋大学, 情報学研究科, 特任教授 (90362293)

Co-Investigator(Kenkyū-buntansha) 目加田 慶人  中京大学, 工学部, 教授 (00282377)
井手 一郎  名古屋大学, 数理・データ科学教育研究センター, 教授 (10332157)
平山 高嗣  人間環境大学, 人間環境学部, 教授 (10423021)
出口 大輔  名古屋大学, 情報学研究科, 准教授 (20437081)
川西 康友  国立研究開発法人理化学研究所, 情報統合本部, チームリーダー (50755147)
Project Period (FY) 2017-04-01 – 2022-03-31
Keywords画像処理 / 機械学習 / 低品質画像 / 車載カメラ
Outline of Annual Research Achievements

本研究の目的は、車載カメラ画像、監視カメラ画像などに見られる超低品質な画像を認識し、ユーザーに結果を適切に情報提示する手法を実現することにある。そこでは「超低品質な画像」の認識が必要となっている。特に、本研究では、機械学習に加えて、「膨大な画像履歴情報を多様な時空間スケールで活用」するアプローチで、超低品質な画像の認識を実現することにある。
本期間(R4及びR5への繰越)では、以下の成果が得られた。(1) 車載カメラを用いた周囲環境認識では、遠方の歩行者がこちらに気付いているかどうかのアイコンタクトを認識する手法を開発した。低解像度のために眼球部分の画像は利用できないために、顔の向き、姿勢情報に加えて、顔や姿勢の動きがどのように変化するかの時間情報や、その歩行者の周囲に存在する人物や車両などの背景知識も統合する手法により、解像度が十分に取れない遠方の歩行者であっても精度よくアイコンタクトを認識することが可能となった。(2) 視覚的注意の研究では、イベント会場などで観客がステージ上に存在する複数の人物のどの人物にどの程度着目しているかを推定する手法を開発した。ステージ上などのカメラから観客を撮影すると、観客の顔向きや眼球を精度よく推定することは困難であるが、ステージ上の人物の動きと、多数の観客の顔の動きの情報を統合することで、ステージ上のある人物を観客がどの程度着目しているかを推定することが可能となった。(3) 時空間を統合した画像認識の研究では、歩行者が所持している荷物の主観的な重さを、歩行動作から推定する手法を開発した。主観的な重さは物理的な重さと異なり、その人物の体格などに影響する。そこで、空間的な情報である歩行者のシルエット画像と、歩行者の骨格の動き情報を統合することにより、主観的な重さを推定する手法を提案し、実験によりその有効性を示した。

Research Progress Status

令和3年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

令和3年度が最終年度であるため、記入しない。

  • Research Products

    (33 results)

All 2023 2022 2021

All Journal Article (8 results) (of which Peer Reviewed: 8 results) Presentation (25 results) (of which Int'l Joint Research: 6 results)

  • [Journal Article] 観衆の顔向きの時空間統合による注目対象の位置及び被注目度の推定2023

    • Author(s)
      武田 一馬, 川西 康友, 平山 高嗣, 出口 大輔, 井手 一郎, 村瀬 洋, 柏野 邦夫
    • Journal Title

      電子情報通信学会論文誌

      Volume: J106-A, No.3 Pages: 58-69

    • DOI

      10.14923/transfunj.2022HAP0006

    • Peer Reviewed
  • [Journal Article] サラウンド映像視聴時の注視点分布の分析2022

    • Author(s)
      高比良 英朗, 篠原 未歩, 野坂 祐介, 横内 雅也, 山田 光穗, 平山 高嗣, 川西 康友, 出口 大輔, 井手 一郎, 村瀬 洋
    • Journal Title

      ヒューマンインタフェース学会論文誌

      Volume: 24(3) Pages: 195-204

    • DOI

      10.11184/his.24.3_195

    • Peer Reviewed
  • [Journal Article] 車両歩行者間のインタラクション行動のモデル化のための 2 段階入出力隠れマルコフモデル2022

    • Author(s)
      新村 文郷, 赤井 直紀, 平山 高嗣, 劉 海龍, 川西 康友, 出口 大輔, 村瀬 洋
    • Journal Title

      情報処理学会論文誌

      Volume: 63(8) Pages: 1371-1382

    • DOI

      10.20729/00218987

    • Peer Reviewed
  • [Journal Article] SfM-student: SfM法を用いたデータ拡張による列車前方映像からのセマンティックセグメンテーション2022

    • Author(s)
      振津 勇紀, 出口 大輔, 川西 康友, 井手 一郎, 村瀬 洋, 向嶋 宏記, 長峯 望
    • Journal Title

      電子情報通信学会論文誌

      Volume: J105-A, No.4 Pages: 48-57

    • DOI

      10.14923/transfunj.2021JAP1021

    • Peer Reviewed
  • [Journal Article] 歩行者属性と運転スキルを考慮したリスクポテンシャル関数による歩行者に対する安全マージン予測2022

    • Author(s)
      前川 大和, 平山 高嗣, 川西 康友, 出口 大輔, 劉 海龍, 井手 一郎, 村瀬 洋
    • Journal Title

      電子情報通信学会論文誌

      Volume: J105-A, No.3 Pages: 38-42

    • DOI

      10.14923/transfunj.2021JAL2005

    • Peer Reviewed
  • [Journal Article] Soft-boundary label relaxation with class placement constraints for semantic segmentation of the railway environment2021

    • Author(s)
      Yuki Furitsu, Daisuke Deguchi, Yasutomo Kawanishi, Ichiro Ide, Hiroshi Murase, Hiroki Mukojima, Nozomi Nagamine
    • Journal Title

      Pattern Recognition Letters

      Volume: Vol.150 Pages: 258-264

    • DOI

      10.1016/j.patrec.2021.07.014

    • Peer Reviewed
  • [Journal Article] Best next-viewpoint recommendation by selecting minimum pose ambiguity for category-level object pose estimation2021

    • Author(s)
      Nik Mohd Zarifie Hashim, Yasutomo Kawanishi, Daisuke Deguchi, Ichiro Ide, Hiroshi Murase
    • Journal Title

      Journal of the Japan Society for Precision Engineering

      Volume: 87(5) Pages: 440-446

    • DOI

      10.2493/jjspe.87.440

    • Peer Reviewed
  • [Journal Article] 画像特徴点の対応を制約とした疎なLiDAR点群からのOdometry推定 ~ガウス過程回帰による深度推定とその信頼度を考慮したOdometry推定~2021

    • Author(s)
      清水 政行, 川西 康友, 出口 大輔, 井手 一郎, 村瀬 洋
    • Journal Title

      精密工学会誌

      Volume: 87(5) Pages: 447-454

    • DOI

      10.2493/jjspe.87.447

    • Peer Reviewed
  • [Presentation] End-to-End gaze grounding from a person pictured from behind2023

    • Author(s)
      Hayato Yumiya, Daisuke Deguchi, Yasutomo Kawanishi, Hiroshi Murase
    • Organizer
      International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications (VISAPP)
    • Int'l Joint Research
  • [Presentation] Subjective Baggage-Weight Estimation from Gait: Can You Estimate How Heavy the Person Feels?2023

    • Author(s)
      Masaya Mizuno, Tomohiro Fujita, Yasutomo Kawanishi, Daisuke Deguchi, Hiroshi Muras
    • Organizer
      International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications (VISAPP)
    • Int'l Joint Research
  • [Presentation] A Preliminary Study on View Independent Panoptic Scene Change Detection2023

    • Author(s)
      Jiaxin Li, Yasutomo Kawanishi, Daisuke Deguchi, Hiroshi Murase
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT)
    • Int'l Joint Research
  • [Presentation] NeRFモデルを用いた初期値非依存なカメラポーズ推定2023

    • Author(s)
      尾﨑 優也, 出口 大輔, 川西 康友, 村瀬 洋
    • Organizer
      情報処理学会研究報告(CVIM)
  • [Presentation] 個人差吸収型距離学習を用いた後ろ向き人物姿勢からの注視領域推定2023

    • Author(s)
      弓矢 隼大, 出口 大輔, 川西 康友, 村瀬 洋
    • Organizer
      情報処理学会研究報告(CVIM)
  • [Presentation] 歩行者の注視対象データセットの構築2023

    • Author(s)
      村上 大斗, 出口 大輔, 平山 高嗣, 川西 康友, 村瀬 洋
    • Organizer
      情報処理学会研究報告(CVIM)
  • [Presentation] Eye-contact Transformer: 骨格系列とシーン特徴による遠方歩行者のアイコンタクト検出2023

    • Author(s)
      畑 隆聖, 出口 大輔, 平山 高嗣, 川西 康友, 村瀬 洋
    • Organizer
      電子情報通信学会技術研究報告(PRMU)
  • [Presentation] Unknown Object Segmentation by View Independent Scene Change Detection2023

    • Author(s)
      李 嘉欣, 川西 康友, 出口 大輔, 村瀬 洋
    • Organizer
      電子情報通信学会技術研究報告(PRMU)
  • [Presentation] 体格を考慮した歩き方からの手荷物の主観的重さ推定の検討2023

    • Author(s)
      水野 雅也, 藤田 倫弘, 川西 康友, 出口 大輔, 村瀬 洋
    • Organizer
      電子情報通信学会技術研究報告(PRMU)
  • [Presentation] Analysis of Gaze while Viewing Videos at Various Playback Speeds2022

    • Author(s)
      Hideaki Takahira, Yasutomo Kawanishi, Takatsugu Hirayama, Hiroshi Murase, Daisuke Deguchi
    • Organizer
      International Display Workshops
    • Int'l Joint Research
  • [Presentation] Detection of distant eye-contact using spatio-temporal pedestrian skeletons2022

    • Author(s)
      Ryusei Hata, Daisuke Deguchi, Takatsugu Hirayama, Yasutomo Kawanishi, Hiroshi Murase
    • Organizer
      IEEE International Conference on Intelligent Transportation Systems (IEEE ITSC)
    • Int'l Joint Research
  • [Presentation] Active Learning for Human Pose Estimation based on Temporal Pose Continuity2022

    • Author(s)
      Taro Mori, Daisuke Deguchi, Yasutomo Kawanishi, Ichiro Ide, Hiroshi Murase, Tetsuo Inoshita
    • Organizer
      International Workshop on Advanced Image Technology (IWAIT)
    • Int'l Joint Research
  • [Presentation] 運転支援のためのフロントガラス周辺からの情報提示方法 ~情報提示位置およびシーンが与える影響の分析~2022

    • Author(s)
      高比良 英朗, 平山 高嗣, 村瀬 洋, 池田 優介
    • Organizer
      ヒューマンインタフェースシンポジウム
  • [Presentation] サムネイル画像への見出しレイアウト生成2022

    • Author(s)
      成川 喬朗, 出口 大輔, 川西 康友, 村瀬 洋
    • Organizer
      画像の認識・理解シンポジウム(MIRU)
  • [Presentation] 時空間骨格情報を用いた遠方歩行者のアイコンタクト検出2022

    • Author(s)
      畑 隆聖, 出口 大輔, 平山 高嗣, 川西 康友, 村瀬 洋
    • Organizer
      画像の認識・理解シンポジウム(MIRU)
  • [Presentation] 歩容からの身体特徴と動作特徴の分離による 手荷物の物理的・主観的重さ推定2022

    • Author(s)
      水野 雅也, 川西 康友, 出口 大輔, 村瀬 洋
    • Organizer
      画像の認識・理解シンポジウム(MIRU)
  • [Presentation] 人物姿勢と注視対象配置制約を利用した後ろ向き人物の注視領域推定2022

    • Author(s)
      弓矢 隼大, 出口 大輔, 川西 康友, 村瀬 洋
    • Organizer
      情報処理学会全国大会
  • [Presentation] 個人差を考慮した歩き方からの手荷物の重さ推定の検討2021

    • Author(s)
      水野 雅也, 川西 康友, 出口 大輔, 村瀬 洋
    • Organizer
      電子情報通信学会技術研究報告(PRMU)
  • [Presentation] 観衆の顔向きの時空間統合によるステージ上の注目対象及び注目度の推定2021

    • Author(s)
      武田 一馬, 川西 康友, 平山 高嗣, 出口 大輔, 井手 一郎, 村瀬 洋, 柏野 邦夫
    • Organizer
      電子情報通信学会技術研究報告(PRMU)
  • [Presentation] 運転支援のためのフロントガラス周辺からの情報提示方法2021

    • Author(s)
      高比良 英朗, 平山 高嗣, 村瀬 洋, 下 憲一郎
    • Organizer
      ヒューマンインタフェースシンポジウム
  • [Presentation] 人物姿勢と注視対象配置制約に基づく後ろ向き人物の注視領域推定2021

    • Author(s)
      弓矢 隼大, 川西 康友, 出口 大輔, 村瀬 洋, 細野 峻司
    • Organizer
      画像の認識・理解シンポジウム(MIRU)
  • [Presentation] 歩き方の特徴に着目した所持物の種類・重さ認識の検討2021

    • Author(s)
      水野 雅也, 川西 康友, 出口 大輔, 村瀬 洋, 井下 哲夫
    • Organizer
      画像の認識・理解シンポジウム(MIRU)
  • [Presentation] 姿勢変化の連続性に着目した人物姿勢推定器の能動学習2021

    • Author(s)
      森 太郎, 出口 大輔, 川西 康友, 井手 一郎, 村瀬 洋, 井下 哲夫
    • Organizer
      画像の認識・理解シンポジウム(MIRU)
  • [Presentation] 車載カメラを用いた遠方歩行者からのアイコンタクトの検出2021

    • Author(s)
      畑 隆聖, 出口 大輔, 平山 高嗣, 川西 康友, 村瀬 洋
    • Organizer
      画像の認識・理解シンポジウム(MIRU)
  • [Presentation] 人物姿勢と注視対象配置制約に基づく後ろ向き人物の注視領域推定2021

    • Author(s)
      弓矢 隼大, 川西 康友, 出口 大輔, 村瀬 洋, 細野 峻司
    • Organizer
      情報処理学会研究報告(CVIM)

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi