3D動画ノンフォトリアリスティックレンダリングの開発と深層学習による生理心理評価
| Project/Area Number |
19K12664
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (C)
|
| Allocation Type | Multi-year Fund |
|---|
| Section | 一般 |
|---|
| Review Section |
Basic Section 90010:Design-related
|
|---|
| Research Institution | University of Nagasaki |
|---|
Principal Investigator |
平岡 透 長崎県立大学, 情報システム学部, 教授 (30626891)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
片山 徹也 長崎県立大学, 情報システム学部, 教授 (00612805)
井上 光平 九州大学, 芸術工学研究院, 准教授 (70325570)
野中 尋史 愛知工業大学, 経営情報科学研究科, 准教授 (70544724)
|
|---|
| Project Period (FY) |
2019-04-01 – 2024-03-31
|
| Project Status |
Granted (Fiscal Year 2022)
|
| Budget Amount *help |
¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2022: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2021: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2020: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
Fiscal Year 2019: ¥1,040,000 (Direct Cost: ¥800,000、Indirect Cost: ¥240,000)
|
|---|
| Keywords | ノンフォトリアリスティックレンダリング / RGB-D動画 / アイトラッカー / 高速化 / 動画 / RGB-D画像 / ３Ｄ / 生理心理評価 / 深層学習 |
|---|
| Outline of Research at the Start |
請者らは自然界や人間社会にある模様を模倣したNPRを数多く開発し，動画のNPRにおいてちらつきとシャワードア効果を抑制する方法も開発している．本研究では，さらに新しいタイプのNPRを開発し，これまでに申請者らが開発したNPRも含めて3D動画に適用する．
また，ユーザの利用用途に応じてNPRの効果的なパラメータや初期値を選択する際，ユーザの判断やアンケート調査などのような主観評価によって行われてきた．本研究では，NPRの視覚効果を眼球運動などの生理情報とアンケート調査などの主観情報を用いて深層学習で評価する新しいNPRの生理心理評価の方法を開発する．
|
| Outline of Annual Research Achievements |
基礎研究として，次に示すタイプのノンフォトリアリスティックレンダリング(NPR)を開発した．：(1)HLS色空間上での明度保存油膜画像，(2)行と列のクラスタリングを用いたサイズ可変なピクセルアート，(3)ウィンドウサイズが異なる周辺差分フィルタを用いた点光源スタイル画像，(4)ベジエ曲面を用いたモアレ風画像，(5)装飾的なピクセルパターンを持ったピクセルアート，(6)画素値のビットパターンを用いた陰陽模様風画像，(7)移動ウィンドウを持ったスムージングフィルタを用いた任意方向波紋画像
RGB-D画像を用いて，模様サイズが可変なセル風画像を生成するNPRを開発した．
RGB-D動画を用いて，モアレ風動画を生成するNPRを開発した．
アイトラッカーを用いて，パラメータの値を変えた場合のセル風画像の生理心理評価を行った．
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
7種類のタイプのNPRを開発した．また，RGB-D画像およびRGB-D動画を用いたNPRを開発した．さらに，アイトラッカーを用いて，パラメータの値を変えた場合のセル風画像の生理心理評価を行った．
以上より，現在の研究がおおむね順調に進展していると評価する．
|
| Strategy for Future Research Activity |
2023年度も引き続きさまざまなタイプのNPRを開発する．また，これまでに開発した静止画のNPRを動画や三次元データに適用する．このとき，動画のNPRでは前後のフレームを用いて，また三次元の動画では奥行の変化も考慮して，ちらつきとシャワードア効果を抑制する．
|
Report
(4 results)
Research Products
(91 results)
