• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

融合型AIに基づくインテリアの推薦のためのユーザー嗜好感性モデルの構築

研究課題

研究課題/領域番号 21K12097
研究種目

基盤研究(C)

配分区分基金
応募区分一般
審査区分 小区分61060:感性情報学関連
研究機関同志社大学

研究代表者

小野 景子  同志社大学, 理工学部, 准教授 (80550235)

研究分担者 花田 良子  関西大学, システム理工学部, 准教授 (30511711)
大木 健太郎  京都大学, 情報学研究科, 助教 (40639233)
研究期間 (年度) 2021-04-01 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
4,030千円 (直接経費: 3,100千円、間接経費: 930千円)
2024年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
2023年度: 910千円 (直接経費: 700千円、間接経費: 210千円)
2022年度: 780千円 (直接経費: 600千円、間接経費: 180千円)
2021年度: 1,430千円 (直接経費: 1,100千円、間接経費: 330千円)
キーワード感性モデル / 深層学習 / 遺伝的プログラミング / 意思決定 / モデル選択 / グラフスペクトル / 量子アニーリング / クラスタリング / インテリア推薦 / 感性 / 人工知能 / 重要ルール抽出
研究開始時の研究の概要

インテリア推薦システムは,購入したい家具に形状や色合いの似た家具を列挙する手法や,画像に埋め込まれたテキスト情報を使って購入したい家具に合う別の家具を提案する手法などが提案されている.しかしこれらの手法は購入者の家具を使う場面が考慮されていない.使用する場面を考慮したインテリア推薦システムが未だ存在しない理由の一つは,感性という曖昧な情報のモデル化が非常に困難なためである.より利便性の高い高度な推薦システムの開発のために,本研究では,(1)感性特徴量を解明し,(2)(1)の特徴量を融合し,(3)重要ルールを考慮した感性に基づくインテリア推薦法の確立を目指す.

研究実績の概要

昨年度は深層学習と決定木に基づくインテリア家具の組み合わせを考慮した手法を提案した.一方,インテリア推薦において,ユーザー趣向を抽出するためには,用いる学習画像はユーザが良し悪しを評価した画像を用いることが望ましい.その場合,画像に写るインテリア家具は様々であり,ルールベース手法に適用する場合,特徴量の欠損が生じることが多い.今年度はそのデータ欠損に対応可能な手法への拡張と,優良なルール抽出のアルゴリズム開発を行った.
ルール抽出の基盤である遺伝的プログラミングの開発においては,近傍探索をベースとした交叉deterministic Multi-step Crossover Fusion (dMSXF)の改良を行った.この手法は,一方の親の木構造に対して部分木の置換,挿入,削除の3つの遺伝操作を適用することで,他方の親が持つ部分木を組み入れた子個体を生成する.dMSXFは両親の形質遺伝に優れた交叉であるが,一方で,両親間の木構造が似通った場合には,操作の候補となる部分木の数が減少し,探索が停滞する問題があった.2023年度は,木構造の回転操作を新たに導入することで,良好な部分木を構成するノードの情報を失うことなく,母集団内の個体の多様性を維持し,dMSXFの探索性能を向上させることを示した.
また木構造抽出法の開発では,木構造を行列として表したときの主要なスペクトル構造の抽出のため,主成分分析に用いられる Oja フローの解析を行った.Ojaフローは通常,対称行列に対して用いられるアルゴリズムで,固有値の大きい順から設定した個数の固有ベクトルを拾ってくる.これが正規行列および一般の行列に対しても,固有値の実部の大きな順から設定した個数を拾ってくることを示し,国内学会発表および学術論文誌へ投稿した(arXiv:2403.03104 にて公開).これにより複雑な木構造になってもスペクトル構造を効率よく抽出することができる.

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

欠損データの対応としては,決定木手法にXGBoostを適用することで3種の家具が含まれる画像において数%のみの性能低下を確認した.現在,よく用いられる深層学習手法であるResNetやVGGにおいては40%程度の性能低下を確認しており,本提案手法の高い性能を確認した.
また,dMSXFにおいては,GPの探索性能を向上させるため,近傍探索をベースとした交叉の開発を行っている.2023年度は,両親の形質遺伝に優れた交叉dMSXFに,新たに木構造の回転操作を導入し,母集団内の個体の多様性を向上させることで,初期収束を回避し,高い探索性能が得られることを示した.
木構造抽出法においては,サイズの異なる木構造を扱うために,これまでに情報量的な特徴付け,スペクトルによる代数的な特徴づけを行ってきており,木構造を扱うための代表的な特徴量の抽出方法を提案してきた.抽象的な距離空間上でのデータ分類手法も昨年度に提案しているので,これらの特徴量間を定量的に議論することができ,良い木構造がどのような特徴量を持つかを実データを利用して調べる準備が整った.

今後の研究の推進方策

本年,木構造探索手法と木構造抽出手法の開発に進展があったため,2024年度は木構造ベースの家具推薦モデルに適用し,推薦性能の更なる向上を図る.また,深層学習を用いた手法では,ユーザの好みの抽出を促進するため,画像のみでなくユーザの購入履歴やレビュー情報なども組み込むことを考えている.
交叉dMSXFでは,制約条件を満たさない致死の子個体が多く生成される.それらの評価値にペナルティを課すことで生存選択の対象から除いていたが,それにより有望な形質(部分木)の情報が失われる可能性がある.2024年度は,致死個体の修正操作を適用することで形質の欠損を緩和することが課題である.
木構造抽出法では,良い木構造のためのルール抽出のため,移動エントロピーによる情報量的な枝の意味づけ,木構造の主要なスペクトル構造の抽出による代数的な特徴づけをこれまで得られており,これらと実際のデータを用いて,ユーザー嗜好性にどのような特徴量が有効かを調べる.

報告書

(3件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 2021 実施状況報告書
  • 研究成果

    (26件)

すべて 2024 2023 2022 2021

すべて 雑誌論文 (5件) (うち査読あり 5件、 オープンアクセス 5件) 学会発表 (21件) (うち国際学会 1件)

  • [雑誌論文] Furniture Recommendations Based on User Propensity and Furniture Style Compatibility2024

    • 著者名/発表者名
      Takeda Masayoshi、Ono Keiko、Taisho Ayumu
    • 雑誌名

      IEEE Access

      巻: 12 ページ: 21737-21744

    • DOI

      10.1109/access.2024.3363459

    • 関連する報告書
      2023 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Furniture Style Compatibility Estimation by Multi-Branch Deep Siamese Network2022

    • 著者名/発表者名
      Ayumu Taisho, Keiko Ono, Erina Makihara, Naoya Ikushima, Sohei Yamakawa
    • 雑誌名

      Mathematical and Computational Applications

      巻: Volume 27, Issue 5, 76 号: 5 ページ: 76-76

    • DOI

      10.3390/mca27050076

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Multi-Scale Feature Fusion for Interior Style Detection2022

    • 著者名/発表者名
      Akitaka Yaguchi, Keiko Ono, Erina Makihara, Naoya Ikushima, Tomomi Nakayama
    • 雑誌名

      Applied Sciences

      巻: Volume 12, Issue 19, 9761 号: 19 ページ: 9761-9761

    • DOI

      10.3390/app12199761

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] NN Structure Optimization using Differential Evolution with Individual Dependent Mechanism2022

    • 著者名/発表者名
      Naoya Ikushima, Keiko Ono, Erina Makihara, Sohei Yamakawa, Ryota Shinhama
    • 雑誌名

      GECCO 2022 - The Genetic and Evolutionary Computation Conferenc

      巻: - ページ: 57-58

    • DOI

      10.1145/3520304.3533943

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Differential Evolution Neural Network Optimization with Individual Dependent Mechanism2021

    • 著者名/発表者名
      Ikushima Naoya、Ono Keiko、Maeda Yuya、Makihara Erina、Hanada Yoshiko
    • 雑誌名

      Proceedings of 2021 IEEE Congress on Evolutionary Computation (CEC)

      巻: - ページ: 2523-2530

    • DOI

      10.1109/cec45853.2021.9504713

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス
  • [学会発表] 欠損データ下における家具の組み合わせを用いたユーザ趣向抽出2024

    • 著者名/発表者名
      菅原 茂剛, 小野 景子
    • 学会等名
      第147回数理モデル化と問題解決・第77回バイオ情報学研究発表会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] Siamese networkを用いた質感とデザインに基づく椅子画像分類2023

    • 著者名/発表者名
      井澤 晋, 竹田 将好, 小野 景子
    • 学会等名
      第143回数理モデル化と問題解決・第74回バイオ情報学研究発表会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] LSTMによる脳波の周波数および時間領域特徴量を用いた感情推定2023

    • 著者名/発表者名
      岡 颯人, 谷 祐貴, 小野 景子
    • 学会等名
      第143回数理モデル化と問題解決・第74回バイオ情報学研究発表会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] MLPを用いた脳波に基づいた感情推定モデルの構築2023

    • 著者名/発表者名
      薗部 匡矢, 小野 景子
    • 学会等名
      日本知能情報ファジィ学会 (SOFT)
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] ユーザの潜在嗜好推定に基づくGANによるインテリア画像生成2023

    • 著者名/発表者名
      酒部 健太郎, 花本 凪, 小野 景子
    • 学会等名
      進化計算シンポジウム2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 深層強化学習ベースの適応的差分進化によるNeural Network最適化法2023

    • 著者名/発表者名
      花本 凪, 小野 景子, 谷祐貴
    • 学会等名
      進化計算シンポジウム2023
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 遺伝的プログラミングにおける多段階探索交叉の近傍生成法の改良2023

    • 著者名/発表者名
      柿迫航輔,花田良子
    • 学会等名
      電気学会 電子・情報・システム部門大会(2023)
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] 正規行列をシステム行列にもつ低ランクKalmanフィルタの解析2023

    • 著者名/発表者名
      都築大樹,大木健太郎
    • 学会等名
      第66回自動制御連合講演会
    • 関連する報告書
      2023 実施状況報告書
  • [学会発表] Objective-aware Attention Branch Network for Interior scene style recognition2023

    • 著者名/発表者名
      Kentaro Fukao, Keiko Ono, Yuki Tani
    • 学会等名
      IEEE Systems Man and Cybernetics 2023
    • 関連する報告書
      2023 実施状況報告書
    • 国際学会
  • [学会発表] LDAを用いたインテリア画像の潜在特徴量分析2022

    • 著者名/発表者名
      松村侑真, 矢口瑛貴, 小野景子, 槇原絵里奈, 花田良子
    • 学会等名
      Fuzzy System Symposium 2022
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 脳波に基づく感情推定モデルのAttention機構による可視化2022

    • 著者名/発表者名
      中山知美, 矢口瑛貴, 小野景子, 槇原絵里奈
    • 学会等名
      生命ソフトウェア・感性工房・而立の会 合同シンポジウム 2022
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] インテリアシーン分類のための階層的Attention Branch Network2022

    • 著者名/発表者名
      深尾賢太郎, 小野景子, 槇原絵里奈, 竹田将好
    • 学会等名
      生命ソフトウェア・感性工房・而立の会 合同シンポジウム 2022
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 雑音駆動型量子アニーリングの検討2022

    • 著者名/発表者名
      江波祥樹,大木健太郎
    • 学会等名
      第66回システム制御情報学会研究発表会(SCI’22)
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] Order/Radix Problemにおけるスイッチ数自動調整機能を持つ最適化アルゴリズムの提案2022

    • 著者名/発表者名
      塚本雅生,花田良子,中尾昌広,山本啓二
    • 学会等名
      第27回日本計算工学会(2022)
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] ルールベースを用いた家具推薦システムにおけるハイパパラメータの探索2022

    • 著者名/発表者名
      菅原茂剛, 矢口瑛貴, 槇原絵里奈, 小野景子
    • 学会等名
      第49回 知能システムシンポジウム
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 感情を考慮した画像とテキスト情報に基づいたインテリア画像分類2022

    • 著者名/発表者名
      竹田将好, 大正歩夢, 小野景子, 槇原絵里奈
    • 学会等名
      知能システムシンポジウム
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 畳み込みニューラルネットワークによる画像の感情価と感動度予測における学習画像の影響度調査2022

    • 著者名/発表者名
      薗部匡矢, 中山知美, 槇原絵里奈, 小野景子
    • 学会等名
      第17回日本感性工学会春季大会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] インテリアシーン分類のための特徴量融合ニューラルネットワーク2022

    • 著者名/発表者名
      深尾賢太郎, 大正歩夢, 槇原絵里奈, 小野景子
    • 学会等名
      第17回日本感性工学会春季大会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 色情報を考慮したBoVW による空間特徴量抽出法の提案2021

    • 著者名/発表者名
      矢口瑛貴, 小野景子, 槇原絵里奈, 大正歩夢, 中山知美
    • 学会等名
      第23回日本感性工学会大会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 遺伝的プログラミングによる人の行動パターンを模した巡回ロボットの行動則の最適化2021

    • 著者名/発表者名
      柿迫航輔,冨永航太,花田良子
    • 学会等名
      計測自動制御学会 システム・情報部門 学術講演会 2021
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 移動エントロピーによるダイナミカルシステムのモデル次数選択2021

    • 著者名/発表者名
      渡辺陵真,大木健太郎
    • 学会等名
      第64回自動制御連合講演会
    • 関連する報告書
      2021 実施状況報告書

URL: 

公開日: 2021-04-28   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi