• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 課題ページに戻る

2020 年度 実施状況報告書

言葉の印象を反映した対話型進化計算による配色デザインシステムに関する研究

研究課題

研究課題/領域番号 20K11896
研究機関明治大学

研究代表者

荒川 薫  明治大学, 総合数理学部, 専任教授 (30183734)

研究分担者 橋本 典久  明治大学, 総合数理学部, 特任講師 (60500642)
研究期間 (年度) 2020-04-01 – 2023-03-31
キーワード配色デザイン / カラーパレット / 視線 / 深層学習 / 主観評価
研究実績の概要

言葉の印象を反映した配色デザインを行うための最初の段階として、人が理想とする色味を有する画像からカラーパレットを作成する方法を、視線情報と深層学習を用いて提案し、その有効性を示した。
自分の理想のカラー画像からカラーパレットを作成する方法はすでにいくつか提案されているが、それらは必ずしもその人が想定した色を抽出しない。そこで、人が、画像を見た時に視線を集める領域(視線領域)を深層学習により推定し、その領域から、その人が好む色を抽出する。この色の抽出も、深層学習を用いる。視線領域を求めるには、比較的簡単に学習を行うことができるCNNを用いるが、色の抽出には、色の微妙な差も影響があるため、より精度の高い学習を行う敵対的生成ネットワークを用いる。視線領域の推定では、カラー画像とアイトラッカーにより求められた視線位置情報の対を複数集めてデータセットを作成し、カラー画像入力に対して、視線領域を出力するようにCNNの学習を行う。色の抽出では、色をHSV情報により10種類に分類し、入力されたカラー画像から、成分の大きな色の種類をN個求め、これらの顕著な色成分に画像を分けて、各々GANにより代表色の推定を行う。なお、Nはカラーパレットの色の数である。また選出されたN個の色成分は重複も可能とし、同色が2つ以上ある場合は、画素値のクラスタリングにより、同色領域をさらに複数に分ける。ここで、カラー画像に対して人が好みだと思う色をマウスクリックにより複数選定し、このカラー画像と好みの色の対を複数集めてデータセットを作成し、それに対してGANの学習を行った。
従来の画像クラスタリング手法及び、Adobe等、実用化されているカラーパレット作成手法と比較実験を行い、提案手法がより正しく色を抽出できること、また、主観評価結果も良好であることを示した。

現在までの達成度 (区分)
現在までの達成度 (区分)

2: おおむね順調に進展している

理由

カラー画像からカラーパレットを求める際、その画像において、人が主に注目する画像領域や人が好ましいと思って注目する色を深層学習により効果的に求める方式を提案し、これに基づいてカラーパレットを作ることで、人が主観的に好ましいと思うカラーパレットが得られることを実験により示した。

今後の研究の推進方策

前年度は、一枚のカラー画像に対して人の主観を考慮したカラーパレット作成の方式を提案したが、今後は、言葉入力により得られた複数のカラー画像を統合したものに対して、この方式を適用し、有効なカラーパレットが作成できるかを検証する。
その際、言葉入力による画像検索で得られる不要な画像を如何に除去するか、また、複数の画像を統合することにより新たに生じる問題への検討を行う。
さらに、得られるカラーパレットに若干の変動を与え、さらに図案に対して、色の配置を行い、対話型進化計算により利用者の好みを反映して図案の配色が可能となるようにする。

次年度使用額が生じた理由

新型コロナウィルス感染拡大のため、学会出張に行くことができなかった。

  • 研究成果

    (7件)

すべて 2021 2020

すべて 雑誌論文 (3件) (うち査読あり 3件) 学会発表 (4件)

  • [雑誌論文] Visual Tracking via Spatial-Temporal Regularized Correlation Filters with Advanced State Estimation2020

    • 著者名/発表者名
      Zhaoqian Tang, Kaoru Arakawa
    • 雑誌名

      Proc. 2020 APSIPA ASC

      巻: - ページ: 1145-1149

    • 査読あり
  • [雑誌論文] Generation of Color Palettes with Deep Neural Networks Considering Human Perception2020

    • 著者名/発表者名
      Beiying Liu, Kaoru Arakawa
    • 雑誌名

      Proc. SISA2020

      巻: - ページ: 24-29

    • 査読あり
  • [雑誌論文] Correlation Filter-Based Visual Tracking Using Confidence Map and Adaptive Model2020

    • 著者名/発表者名
      Zhaoqian Tang, Kaoru Arakawa
    • 雑誌名

      IEICE TRANSACTIONS on Fundamentals of Electronics, Communications and Computer Sciences

      巻: E103-A ページ: 1512-1519

    • DOI

      10.1587/transfun.2020SMP0007

    • 査読あり
  • [学会発表] 人間の知覚を考慮した深層学習によるカラーパレット生成とその評価2021

    • 著者名/発表者名
      リュウ バイイン,荒川 薫
    • 学会等名
      電子情報通信学会SIS研究会
  • [学会発表] 輪郭画像入力によるGANを用いた対話型進化計算デザインシステム2020

    • 著者名/発表者名
      Chen Xin, 荒川 薫
    • 学会等名
      電子情報通信学会ソサイエティ大会
  • [学会発表] 適応型時空間正則化相関フィルタによる動き物体追跡方式2020

    • 著者名/発表者名
      唐 兆前,荒川 薫
    • 学会等名
      電子情報通信学会ソサイエティ大会
  • [学会発表] 言葉の印象を反映したGANによる対話型タイルデザインシステム2020

    • 著者名/発表者名
      竹岸真緒,荒川薫
    • 学会等名
      情報処理学会全国大会

URL: 

公開日: 2021-12-27  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi