2022 Fiscal Year Research-status Report
融合型AIに基づくインテリアの推薦のためのユーザー嗜好感性モデルの構築
| Project/Area Number |
21K12097
|
|---|
| Research Institution | Doshisha University |
|---|
Principal Investigator |
小野 景子 同志社大学, 理工学部, 准教授 (80550235)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
花田 良子 関西大学, システム理工学部, 准教授 (30511711)
大木 健太郎 京都大学, 情報学研究科, 助教 (40639233)
|
|---|
| Project Period (FY) |
2021-04-01 – 2025-03-31
|
| Keywords | 感性モデル / 深層学習 / 遺伝的プログラミング / 意思決定 / モデル選択 / 量子アニーリング |
|---|
| Outline of Annual Research Achievements |
ユーザーの感性推定モデルは商品の購買時の商品評価や購入履歴や映画のレビュー評価などの明示的なデータを用いて評価されることが多いが，商品画像や映画のポスターなどの視覚データはユーザの好みを大きく映し出すと考え，今年度は画像の特徴量やユーザが好む画像にはどのような特徴があるかまで分析できる深層学習モデル，ルールベースに基づく学習モデルの開発に取り組んだ．画像は，1つのオブジェクトが写っている簡単な画像ではなく，複数のオブジェクトがあり，かつその中に好むオブジェクトがある，またはオブジェクト間のコンビネーションに意味があるというような，ユーザーが買い物などの場面で遭遇するシチュエーションに近くなるよう，具体的には家具を含むインテリア画像からのユーザー趣向のモデル化を行なった． ルールベースに基づく手法では，重要な部分ルールの抽出が必須であるため，連結グラフの最適化手法の改良，ルールの意味理解のための基盤技術である量子アニーリングマシンの改良を行った．具体的には，ホストスイッチネットワークなど，次数が不定の連結グラフの最適化問題において，設計変数空間を固定しないもとでSimulated Annealingで適応的に最適化を行う手法の構築を行い，その性能を評価した．また，量子アニーリングマシンの性能向上について，あえて雑音を乗法的に加えることで性能向上させることができることを理論的に示し，学会発表した．アニーリングは，計算時間をかければかけるほど最適解を得られる確率が上がるが，雑音の大きさを調整することで短い計算時間でも同じ効果が得られることを示した．
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
今年度はAttention Mapと呼ばれる深層学習における可視化法を用いて，ユーザーが好むインテリア画像のどのエリアを注目していそうかを推定した．また，ユーザーの好みは多様であると仮定し，Attention Mapを多層化するモデルを提案し好みごとにMapを出力する機構を構築した．具体的には好みをインテリア画像のスタイルと読み替え，日本風，ヨーロッパ風，スカンジナビア風などスタイルを推定しながら，同時に日本風と推定した画像の注目領域を推定するモデルを構築した．また，ルールベース手法では特徴量をもとにルールを構築していくが，画像特徴量の欠損が大きな問題であることが分かった．例えば画像のソファーの素材特徴量を用いる場合，画像によってはソファーが無い画像もあり，その場合ルールの作成に失敗し，またそのようなケースが多く確認できた．そのため，欠損データを他の特徴量に基づき，類似する画像から推定するベイズ推定ベースの手法を開発した．現在は性能評価実験を行なっている．
連結グラフの最適化では，木やホストスイッチネットワークなどグラフ構造最適化において，精度が高く，かつ効率的に解く手法の開発が目標である．今年度は1点探索のSAに基づく手法を開発した．また，量子アニーリングに基づくルール分析においては，カーネル関数を用いた距離空間上のデータ分類について，diffusion maps と呼ばれる手法を中心に検討している．融合手法のルールの意味理解のために，得られた結果の良し悪しを判断するための尺度は，数学的には異なるサイズの木構造を比較できるものでなければならない．Diffusion maps を用いた手法は，抽象的な距離空間上のデータ分類ができることまでは明らかにしており，適切な距離を構成することで異なるサイズの木構造を比較検討することができる．
|
| Strategy for Future Research Activity |
本年，ユーザの好みを推定するためにインテイアスタイルの推定だけだなく，被験者実験による好みデータを取得し始めた．サンプル数を増やし，開発した手法における性能評価を実施したい．また，被験者実験において，インテリアのスタイルの感じ方はユーザーによって大きく変わること，またスタイルを分けれないケースが多くあることが分かった．例えば日本風とアジア風など．そのため，推定モデルを改良し，複数ラベルを許容するモデルに改良することを考えている．
連結グラフの最適化では，木やホストスイッチネットワークなどグラフ構造の問題に対して，遺伝的アルゴリズムなどの進化計算を用いた，より大域的な探索の実現が来年度の課題である．
また，進捗状況に書いたように，量子アニーリングモデルにおいては，ルールの意味理解のための具体的な良い距離を明らかにし，それに基づいた木構造の良し悪しを検討する．2021年度に報告したように，以前研究発表した移動エントロピーは尺度の１つの候補であり，カーネル関数の手法と融合することで良い木構造の判別を行っていく．
|
| Causes of Carryover |
コロナウィルスの蔓延により，次の理由により計画との差額が生じた.(1)国際学会がオンラインになり渡航が不要になったため. 次年度は，今年度に実施できなかった被験者実験を実施し，そのアルバイト代として，国際学会に現地で開催される可能性が高いため，その参加費として，およ び研究成果を論文にする際の費用として，研究費を使用する予定である.
|
Research Products
(8 results)
