Understanding and control of mind through gaze
| Project/Area Number |
18H03312
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (B)
|
| Allocation Type | Single-year Grants |
|---|
| Section | 一般 |
|---|
| Review Section |
Basic Section 61050:Intelligent robotics-related
|
|---|
| Research Institution | Hiroshima City University |
|---|
Principal Investigator |
満上 育久 広島市立大学, 情報科学研究科, 教授 (00467458)
|
|---|
| Project Period (FY) |
2018-04-01 – 2022-03-31
|
| Project Status |
Granted (Fiscal Year 2021)
|
| Budget Amount *help |
¥17,030,000 (Direct Cost: ¥13,100,000、Indirect Cost: ¥3,930,000)
Fiscal Year 2021: ¥2,860,000 (Direct Cost: ¥2,200,000、Indirect Cost: ¥660,000)
Fiscal Year 2020: ¥5,330,000 (Direct Cost: ¥4,100,000、Indirect Cost: ¥1,230,000)
Fiscal Year 2019: ¥3,510,000 (Direct Cost: ¥2,700,000、Indirect Cost: ¥810,000)
Fiscal Year 2018: ¥5,330,000 (Direct Cost: ¥4,100,000、Indirect Cost: ¥1,230,000)
|
|---|
| Keywords | 注視 / 人物行動解析 / 人物映像処理 / 理解度推定 / 健康状態推定 / 注視推定 / e-learning / 視覚探索課題 / ドローン / VR / 姿勢推定 |
|---|
| Outline of Annual Research Achievements |
前年度までに構築した眼球頭部協調運動モデル化による視線推定技術をさらに発展させ，視線方向の確率分布を推定する技術を開発した．これにより，従来法の問題となっていた「同一の頭部運動であればその際の視線方向は一意である」という仮定を取り払うことができ，また，確率分布の広がりにより視線推定の確からしさを評価できるようになった．また，実環境注視行動データセットおよびVR環境注視行動データセットそれぞれを用いてモデルを構築し，その互換性を調査した．
全身運動の計測については，昨年度までに実現した複数台Webカメラを用いたモーションキャプチャシステムと人物自動追従ドローンの技術を統合し，複数台ドローンカメラによるモーションキャプチャシステムを開発した．従来のモーションキャプチャシステムが，専用の機材を設置した限られた空間内でしか人の三次元姿勢を計測できなかったのに対して，このシステムは原理上，屋内外問わず人が広範囲を移動しても常にそのそばにドローンが自動追従することでどこでも三次元姿勢の計測が可能になるため，大きなアドバンテージがあると考えられる．
VR視覚探索課題による心の健康状態推定については，昨年度までに確認した「VR環境下での視覚探索において，視覚探索時間が人の主観的幸福度の高低により有意に異なる」という知見を論文にまとめ，バーチャルリアリティ学会論文誌に採択・掲載された．その後の展開として，視覚探索時間が主観的幸福度の高低により異なるメカニズムを解明に取り組んだ．具体的には，仮説として縦方向のcrowding effectが影響していると考え，従来よりも視覚探索課題の探索空間を縦方向に拡げて実験参加者データを収集し，分析を行った．
|
| Current Status of Research Progress |
Current Status of Research Progress
3: Progress in research has been slightly delayed.
Reason
眼球頭部協調運動のモデル化による視線推定・視線確率分布推定については，これまでに構築した実環境注視動向データセットおよびVR環境注視行動データセットを用いた学習・評価が可能で新たなデータ収集が不要だったことから，順調に開発が進んだ．頭部方向を注視方向とみなすという単純な方法よりも大幅な視線推定精度の向上が確認されたことは期待以上の成果であった．
複数台ドローンを用いたモーションキャプチャについては，その有効性を確認するための最小限の実験を行うことはできたが，コロナ禍の影響により十分な性能評価ができなかった点で，やや期待を下回る結果となった．
VR視覚探索課題による心の健康状態推定については，本年度取り組んだcrowding effectの仮説検証において，これまでのところこれが視覚探索時間の差に影響を及ぼしているという客観的データは得られなかった．
|
| Strategy for Future Research Activity |
眼球頭部協調運動のモデル化による視線推定・視線確率分布推定は，本年度までにその効果は十分に確認できたため，これを誰もが容易に利用できるよう， Pythonのライブラリの形に整備する予定である．特に，この技術はアイトラッカーを備えない市販のVRゴーグルにおいて視線を推定するという用途に有用なため，そのような用途を想定してライブラリを設計・実装する．
VR視覚探索課題による心の健康状態推定において，これまではVRゴーグルから得られる視覚探索時間や頭部運動を対象とした分析しかできなかったことが分析の大きな妨げになっていた．しかし，上述の視線推定ライブラリにより，これまでに収集した実験参加者の頭部運動からも視線推定が可能となる．今後は，これにより復元された視線軌跡を用いて分析を進める予定である．
複数台ドローンを用いたモーションキャプチャについては，計測対象の人物の歩行開始・終了時など速度変化が生じるところで自動追従に遅れが生じ，それが三次元姿勢推定やその後の歩行分析の妨げになることがあったことから，そのような速度変化においてもスムーズに自動追従するための人物の未来位置予測技術やそれに基づくレスポンスのよい自動追従制御技術を開発する予定である．
|
Report
(3 results)
Research Products
(55 results)
