ヘッドマウントカメラ影像から得られたシーン列による行動パターンの自動獲得

2002 Fiscal Year Annual Research Report

• Project/Area Number: 14780234
• Research Institution: Future University-Hakodate
• Principal Investigator: 長崎 健 公立はこだて未来大学, システム情報科学部, 講師 (70325893)
• Keywords: ヘッドマウントカメラ / 視点映像 / 局所特徴量

Research Abstract

1.研究の背景
ウェアラブルコンピュータを用いたユーザの行動記録システムは,対象を日常生活の中で生活すると,対象の動作に対する個人差(癖)が問題となる.しかし,特定の個人が使いつづけるシステムを作る場合,個人の癖が行動理解のかぎとなる.日常の生活は,動作の繰り返しが多く発生するので,これらの繰り返しの中に現れる共通する特徴(癖)を獲得することで,行動パターンが獲得される.癖の獲得には,頭部に装着したカメラの影像を用いる.
2.研究の目的
本研究では,ユーザーの頭部にビデオカメラを装着し,撮影した日常生活映像に対して,要約(シーンの抽出)とキーフレーム(イベント)の抽出を自動で行う.自動抽出されたイベント列からは,繰り返し発生する類似のパターンを見つけ,ユーザー個人の行動パターンを自動獲得を行う.
3.研究の成果
今年度の研究では,以下の点について提案を行った.
(1).局所不変量を用いた,動画像シーンの抽出
類似するフレームを集めたシーンの抽出を行った.局所不変量を用いた動画像シーンの抽出は,近隣のフレームの類似性を評価し自動的に行う手法を提案した.本手法は,日常生活環境のような環境でも安定して動作することが示された.
(2).シーン間の類似性評価
それぞれ抽出されたシーンについて,シーン間の類似性を求める手法を確立した.シーンとシーンの比較についても,局所不変量を用いた画像比較の手法を用いることで,シーン抽出と同様に安定した比較を実現できた.
これらの手法は,5分から数時間の数種類の記録データに対して用い,シーンの抽出とシーン間の比較に対する有効性を示した.

Research Products

• [Publications] 長崎健, 戸田真志, 川嶋稔夫: "日常生活における行動記録映像の構造化"電子情報通信学会技術研究報告. PRMU2002. 109-114 (2002)
• [Publications] 戸田 真志, 長崎 健, 飯島 俊匡, 川嶋稔夫: "日常生活における記録映像の要約呈示"電子情報通信学会技術研究報告. PRMU2002. 115-120 (2002)
• [Publications] Masashi Toda, Takeshi Nagasaki, Toshimasa Iijima, Toshio Kawashima: "Structural Representation of Personal Events"The international Archives of the Photogrammetry, Remote Sensing and Spatial Information Sciences. (CD-ROM). (2002)
• [Publications] Takeshi Nagasaki, Masashi Toda, Toshio Kawashima: "Grouping ViewPoint Image into Scenes Based on Similarity between Frames"Proc. of Visual Communications and Image Processing 2003(VCIP2003). (Accepted). (2003)
• [Publications] Masashi Toda, Takeshi Nagasaki, Toshio Kawashima: "Episode Image Analysis for Wearable Daily Life Recording System"Proc. of Visual Communications and Image Processing 2003(VCIP2003). (Accepted). (2003)