画像の解像度変換により生じる違和感の視線計測による要因解明と評価システムの開発

2020 Fiscal Year Research-status Report

• Project/Area Number: 17K12770
• Research Institution: Ishikawa National College of Technology
• Principal Investigator: 川除 佳和 石川工業高等専門学校, 電子情報工学科, 准教授 (90552547)
• Project Period (FY): 2017-04-01 – 2022-03-31
• Keywords: 違和感評価 / 客観評価システム / 視線計測 / 解像度変換

Outline of Annual Research Achievements

イメージリターゲッティング(以下，IR)は，違和感の発生を抑えた画像の解像度／アスペクト比の変換を目的とした画像変換技術であり，ディスプレイの多様化に伴いその必要性が高まっている．適切な変換が行えた場合のIRの性能は高く，ほぼ違和感なく変換できる一方で，絵柄によっては「多大な違和感を生じさせる不適切な変換」が生じる致命的な欠点がある．この解決には違和感の定量的評価に基づき設計・改良を行うことが不可欠となるが，違和感評価は主観に頼らざるを得ないのが現状で時間・労力の制約が大きい．
そこで本研究では，画像の解像度変換により生じる違和感の要因を視線計測を用いて解明するとともに違和感評価システムを開発し，IR研究のサポート基盤確立を目指す．昨年度までに，(1)IR画像に対する主観評価実験(違和感評価および視線計測)，(2)得られた知見に基いた画像特徴量と違和感の関連性調査，(3)画像に生じる違和感をコンピュータにより評価するシステムを開発した．(3)で開発したシステムは，物体検出手法を用いて解像度変換前後の画像において物体検出率の変化量から違和感を推定するシステムであり，絵柄依存性はあるもののある特定の絵柄だけに限定すればある程度の推定性能を有することを確認した．
本年度は，開発したシステムに対して，コンピュータ端末上のディスプレイだけではなくタブレット端末上においても主観評価実験を行い，「視覚的重要度マップの自動生成」に対する開発システムの応用・性能を検証すすめる予定であったが実験が遅延したため，本年度に引き続き，開発システムの応用・性能検証を進める．

Current Status of Research Progress

4: Progress in research has been delayed.

Reason

開発したシステムに対して，コンピュータ端末上のディスプレイだけではなくタブレット端末上においても主観評価実験を行い，「視覚的重要度マップの自動生成」に対する開発システムの応用・性能を検証すすめる予定であったが実験が遅延したため，本年度に引き続き，開発システムの応用・性能検証を進める．

Strategy for Future Research Activity

タブレット端末に表示されたIR画像に対する主観評価実験(違和感評価および視線計測)を実施し，得られた知見を用いて「視覚的重要度マップの自動生成」対 して開発したシステムを応用・性能検証する.