2020 Fiscal Year Research-status Report
人間の視覚特性に基づく人物印象属性の自動推定に関する研究
| Project/Area Number |
20K11864
|
|---|
| Research Institution | Tottori University |
|---|
Principal Investigator |
西山 正志 鳥取大学, 工学研究科, 准教授 (20756449)
|
|---|
| Project Period (FY) |
2020-04-01 – 2023-03-31
|
| Keywords | 印象 / 人物 / 視覚特性 / 計測 / 学習モデル |
|---|
| Outline of Annual Research Achievements |
美しい，上品である，清潔感があるなど，人物画像の見た目から感じる印象について，人間の様に画像を見て感じる深層学習モデルを新たに開発する．既存の学習モデルでは，人物画像と印象単語のペアを訓練サンプルとするデータドリブンの手法を適用することが一般的であり，システムが人間と同じ様に見て感じているとは言えなかった．本研究の目的は，人物印象の自動推定を対象とし，人間が情報システムへ教師ラベルを与える作業を通して，人間の視覚特性を計測し，その特性をアルゴリズムに組み込む方法を構築していくことにある．まず，人物印象に対する視覚特性を，ラベル付け作業時に高精細で計測する方法を探っていく．次に，深層学習のアテンション機構を発展させ，印象に対する視覚特性を組み込んだネットワークモデルを設計していく．
本年度は，印象を表す単語を設定し，人物画像に印象単語を付与することでデータセットを構築した．印象単語を扱う上で，個人が置かれている状況と，その感じ方の違いを起因とする難しさが想定された．この難しさに対応するために，本研究では想定する状況を，パーティーや式典など，フォーマルな場に絞り込むこととした．実験協力者として日本人大学生の男女を集め，上記の場に相応しい人物印象について主観評価を行った．具体的にはこれらの印象単語について，人物画像に主観ラベルを実験協力者が付与した．その結果，知性的や温厚など印象単語は，その単語から感じる人物印象が似ているかどうかという観点で，遠い位置に空間上で配置されることが分かった．
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
本年度は，計画通りに研究課題へ取り組むことができた．研究成果の進捗について論文誌と国内学会で発表し，本課題の着眼点，および，主観評価による実験結果について高評価を得た．人間が感じる印象単語は何であるか，および，その印象単語を工学的に取り扱える可能性があるかを明らかにすることを本年度の実験では重視した．実応用で考えられるフォーマルな場を想定し，代表的な印象単語を用いて主観評価を行った．現時点では，当初計画した成果が見込まれる実験結果を得ている．次年度以降は，印象単語を付与する作業へ視線計測を組み込む独自改良を加えていき，検証をさらに深められる方向性が，本年度の実験結果より明らかになった．
|
| Strategy for Future Research Activity |
本年度に実施した主観評価で得た印象単語について，その印象単語を人間が見分ける時の視覚特性を計測する方法について，次年度以降で構築していく．このために，次年度の実験では，人物画像を大きく表示できる平面ディスプレイを用いて実験協力者に刺激を与えていく．印象に対する視線の位置と順序を正確に捉えるために必要な表示装置と計測装置の時空間分解能を検証していく．さらに次年度では，刺激画像中の人物姿勢の自由度を高めるために，画像から身体部位を検出することで視線が集まる領域の位置合わせを行う予定である．これにより据置型だけでなく装着型の視線計測装置も使用できるかどうか評価していく．視線計測を行う際，実験協力者に印象を判断させる指示を与えた上で，人物画像を一枚ずつ表示し，その印象に当てはまるかどうかを回答させる予定である．なお，既に得ている研究成果については早急に論文化を進めていく．
|
