• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

人の創作物を理解する人工知能の進化的獲得に関する研究

研究課題

研究課題/領域番号 19H04184
研究種目

基盤研究(B)

配分区分補助金
応募区分一般
審査区分 小区分61040:ソフトコンピューティング関連
研究機関大阪公立大学 (2022)
大阪府立大学 (2019-2021)

研究代表者

森 直樹  大阪公立大学, 大学院情報学研究科, 教授 (90295717)

研究分担者 上野 未貴  大阪工業大学, 工学部, 講師 (60757368)
研究期間 (年度) 2019-04-01 – 2023-03-31
研究課題ステータス 完了 (2022年度)
配分額 *注記
17,160千円 (直接経費: 13,200千円、間接経費: 3,960千円)
2022年度: 2,730千円 (直接経費: 2,100千円、間接経費: 630千円)
2021年度: 3,120千円 (直接経費: 2,400千円、間接経費: 720千円)
2020年度: 5,720千円 (直接経費: 4,400千円、間接経費: 1,320千円)
2019年度: 5,590千円 (直接経費: 4,300千円、間接経費: 1,290千円)
キーワード創作物理解 / 深層学習 / 進化型計算 / 人工知能 / 機械学習 / 創作と人工知能 / 創作者支援 / Data Augmentation / 創作者と人工知能 / AutoML / 創作物データ / ストーリーデータセット / 物語理解 / コミックデータ / 漫画
研究開始時の研究の概要

近年人工知能が注目されているが,人の創作物を理解できる人工知能はまだない.そこで,創作物をデータとして客観視するだけではなく,創作過程で込められた想いを主体的に扱い,創作者と研究者をつなぐ人工知能の構築を目的とする.また,高度な人工知能構築に必須なディープラーニングはいまだに試行錯誤的な域を出ておらず,構築は容易ではない.この問題を解決するために,本研究課題は人の創作物を理解する人工知能を進化的に獲得可能な進化型機械学習を提案する.最終的に,人工知能への適用を前提としたこれまでにない創作物データセットの構築および進化型機械学習により進化的に獲得した人工知能による人の創作物理解を目指す.

研究成果の概要

本課題では人工知能による創作物理解を目的として,漫画に基づく研究(コマ識別,感情推定,オノマトペ理解),写真に基づく研究(写真の定量評価,星空画像の生成,昆虫画像の識別),だまし絵に関する研究(AI によるだまし絵の識別,画像情報に基づくだまし絵の生成,言語情報に基づくだまし絵の生成),その他の創作物理解(習字,ファッション,ゲーム)および AutoML に関する研究 (TDGA AA, Pareto TDGA AA, tdgaCNN) に関して多くの成果を得た.また,人工知能学会において創作者と人工知能が創る創作の未来に関するオーガナイズドセッションを 4 回開催し,当該分野の発展に努めた.

研究成果の学術的意義や社会的意義

近年人工知能が注目されているが,人の創作物を理解できる人工知能はまだない.そこで,創作物をデータとして客観視するだけではなく,創作過程で込められた想いを主体的に扱い,創作者と研究者をつなぐ人工知能の構築について研究した.また,進化型機械学習として新しいData Augmentation 手法等を提案した.コロナ禍という厳しい状況の中で,4 回のオーガナイズドセッションを企画し,当該分野における人的交流に寄与した.
近年の生成系人工知能の発展によって,創作物に関する研究は今後ますます注目され,積極的に研究がなされていくはずである.本研究課題によって当該分野へ一定の貢献をすることができたと考える.

報告書

(5件)
  • 2022 実績報告書   研究成果報告書 ( PDF )
  • 2021 実績報告書
  • 2020 実績報告書
  • 2019 実績報告書
  • 研究成果

    (62件)

すべて 2023 2022 2021 2020 2019

すべて 雑誌論文 (9件) (うち査読あり 9件、 オープンアクセス 2件) 学会発表 (53件) (うち国際学会 19件、 招待講演 1件)

  • [雑誌論文] Constellation identification method using point set data2023

    • 著者名/発表者名
      Sayaka Nadamoto, Naoki Mori, Makoto Okada
    • 雑誌名

      Artificial Life and Robotics

      巻: 28 号: 2 ページ: 361-366

    • DOI

      10.1007/s10015-023-00860-4

    • 関連する報告書
      2022 実績報告書
    • 査読あり
  • [雑誌論文] 不均衡分類問題としての小説の段落境界推定2021

    • 著者名/発表者名
      飯倉 陸, 岡田 真, 森 直樹
    • 雑誌名

      情報処理学会論文誌

      巻: 62 号: 3 ページ: 891-902

    • DOI

      10.20729/00210253

    • NAID

      170000184452

    • 年月日
      2021-03-15
    • 関連する報告書
      2020 実績報告書
    • 査読あり
  • [雑誌論文] Paragraph Boundary Recognition in Novels for Story Understanding2021

    • 著者名/発表者名
      Iikura Riku、Okada Makoto、Mori Naoki
    • 雑誌名

      Applied Sciences

      巻: 11 号: 12 ページ: 5632-5632

    • DOI

      10.3390/app11125632

    • 関連する報告書
      2021 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] CVAE-Based Complementary Story Generation Considering the Beginning and Ending2021

    • 著者名/発表者名
      Iikura Riku、Okada Makoto、Mori Naoki
    • 雑誌名

      Distributed Computing and Artificial Intelligence

      巻: 19 ページ: 22-31

    • DOI

      10.1007/978-3-030-86261-9_3

    • ISBN
      9783030862602, 9783030862619
    • 関連する報告書
      2021 実績報告書
    • 査読あり
  • [雑誌論文] 「深層学習による4コマ漫画のストーリー解析用データセット及びフレームワークの開発」の取組み2019

    • 著者名/発表者名
      上野 未貴
    • 雑誌名

      日本画像学会誌

      巻: 58 号: 5 ページ: 545-551

    • DOI

      10.11370/isj.58.545

    • NAID

      130007726205

    • ISSN
      1344-4425, 1880-4675
    • 年月日
      2019-10-10
    • 関連する報告書
      2019 実績報告書
    • 査読あり
  • [雑誌論文] ストーリー解析のための文の分散表現に基づく小説の自動セグメンテーション手法の提案2019

    • 著者名/発表者名
      福田清人, 森直樹, 松本啓之亮, 岡田真
    • 雑誌名

      芸術科学会論文誌

      巻: 18 ページ: 63-75

    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Analysis based on Distributed Representations of Various Parts Images in Four-scene Comics Story Dataset2019

    • 著者名/発表者名
      A. Terauchi, N. Mori, M. Ueno
    • 雑誌名

      2019 International Conference on Document Analysis and Recognition Workshops

      巻: 1 ページ: 50-55

    • DOI

      10.1109/icdarw.2019.00014

    • 関連する報告書
      2019 実績報告書
    • 査読あり
  • [雑誌論文] Evolutionary Approach for Model Compression of Neural Network Using Support Vector Machine with AND/OR Layers2019

    • 著者名/発表者名
      K. Ogawa and N. Mori
    • 雑誌名

      Proc. of the 18th International Conference on New Trends in Intelligent Software Methodologies, Tools and Techniques

      巻: 18 ページ: 231-243

    • 関連する報告書
      2019 実績報告書
    • 査読あり
  • [雑誌論文] Understanding multilingual four-scene comics with deep learning methods2019

    • 著者名/発表者名
      J. Chen, R. Iwasaki, N. Mori, M. Okada, M. Ueno
    • 雑誌名

      2019 International Conference on Document Analysis and Recognition Workshops

      巻: 1 ページ: 32-37

    • DOI

      10.1109/icdarw.2019.00011

    • 関連する報告書
      2019 実績報告書
    • 査読あり
  • [学会発表] An improved method for multi-label classification methods using deep neural language models with ensemble learning2023

    • 著者名/発表者名
      Y. Kusumoto, M. OKADA and N. Mori
    • 学会等名
      28th International Symposium on Artificial Life and Robotics
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] A Method to Constract a Masked Knowlege Graph Model using Transformer for Knowledge Graph Reasoning2023

    • 著者名/発表者名
      R. Kaneda, M. OKADA and N. Mori
    • 学会等名
      The 1st International Knowledge Graph Reasoning Challenge
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Transformer を導入したランク学習に基づく投資戦略の解析2023

    • 著者名/発表者名
      坂川 翔祐, 森 直樹
    • 学会等名
      第 30 回 人工知能学会 金融情報学研究会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Object Detection of Camouflaged Insect by Artificial Intelligence2022

    • 著者名/発表者名
      R. Okamoto and N. Mori
    • 学会等名
      The 26th International Congress of Entomology
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Evolutionary Acquisition of CNN Architecture by Thermodynamical Genetic Algorithm2022

    • 著者名/発表者名
      R. Okamoto, N. Mori and M. OKADA
    • 学会等名
      13th International Congress on Advanced Applied Informatics
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Automatic Astrophotography Editing Method Using Deep Learning2022

    • 著者名/発表者名
      S. Nadamoto, N. Mori and M. OKADA
    • 学会等名
      13th International Congress on Advanced Applied Informatics
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Neural Ranking Strategy for Portfolio Construction Using Transformers2022

    • 著者名/発表者名
      S. Sakagawa and N. Mori
    • 学会等名
      13th International Congress on Advanced Applied Informatics
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Vision Transformer と GAN による多義図形認識および生成に関する研究2022

    • 著者名/発表者名
      伊藤 薫, 森 直樹, 岡田 真
    • 学会等名
      第36回 人工知能学会全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 敵対的生成ネットワークを用いた星空画像生成手法の提案2022

    • 著者名/発表者名
      灘本 紗也佳, 森 直樹, 岡田 真
    • 学会等名
      第36回 人工知能学会全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 漫画における指示詞の照応関係データセットの構築と機械学習手法を用いた検証2022

    • 著者名/発表者名
      大和 秀徳, 岡田 真, 森 直樹
    • 学会等名
      第36回 人工知能学会全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Vision Transformer と BERT を用いた漫画のマルチモーダル識別2022

    • 著者名/発表者名
      青木 尚人, 森 直樹, 岡田 真
    • 学会等名
      第36回 人工知能学会全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 漫画における皮肉データセットの構築とその有効性の検証2022

    • 著者名/発表者名
      多田 瑞葵, 岡田 真, 森 直樹
    • 学会等名
      第36回 人工知能学会全国大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Proposal of a Constellation Identification Method Using Point Set Data2022

    • 著者名/発表者名
      S. Nadamoto, N. Mori and M. Okada
    • 学会等名
      27th International Symposium on Artificial Life and Robotics
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] Estimating Semantic Relationships between Sentences Using Word Embedding with BERT2021

    • 著者名/発表者名
      R. Kaneda, M. Okada and N. Mori
    • 学会等名
      10th International Congress on Advanced Applied Informatics
    • 関連する報告書
      2021 実績報告書
    • 国際学会
  • [学会発表] 熱力学的遺伝アルゴリズムおよび Bi-LSTM + VSE に基づくコーディネートスケジュールの最適化2021

    • 著者名/発表者名
      林 美衣, 森 直樹
    • 学会等名
      第 35 回人工知能学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 星図データに基づく星座画像の生成と星座識別手法の提案2021

    • 著者名/発表者名
      灘本 紗也佳, 森 直樹, 岡田 真
    • 学会等名
      第 35 回人工知能学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 潜在変数付き階層型エンコーダ・デコーダモデルに基づく物語の補完的生成手法の提案2021

    • 著者名/発表者名
      飯倉 陸, 岡田 真, 森 直樹
    • 学会等名
      第 35 回人工知能学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] Support Vector Machine のカーネルを利用したニューラルネットワークの構築2021

    • 著者名/発表者名
      坂川 翔祐, 森 直樹
    • 学会等名
      第 35 回人工知能学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] TDGA AutoAugment を用いた漫画データセットにおけるデータ拡張手法の提案2021

    • 著者名/発表者名
      吉田 航, 寺内 光, 森 直樹, 岡田 真
    • 学会等名
      第 35 回人工知能学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] 自由配置型アトラス畳み込みに基づくセマンティックセグメンテーション手法の提案2021

    • 著者名/発表者名
      岡本 竜馬, 寺内 光, 森 直樹, 岡田 真
    • 学会等名
      第 35 回人工知能学会全国大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] BERT を用いた指示詞の照応関係の推定手法の検討2021

    • 著者名/発表者名
      大和 秀徳, 岡田 真, 森 直樹
    • 学会等名
      2021 年度 情報処理学会関西支部 支部大会
    • 関連する報告書
      2021 実績報告書
  • [学会発表] Improving BERT with Focal Loss for Paragraph Segmentation of Novels2020

    • 著者名/発表者名
      R. Iikura, M. Okada, N. Mori
    • 学会等名
      Proc. of 17th International Conference of Distributed Computing and Artificial Intelligence
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] Analysis of Partial Semantic Segmentation for Images of Four-Scene Comics2020

    • 著者名/発表者名
      A. Terauchi, N. Mori, M. Ueno
    • 学会等名
      Proc. of 17th International Conference of Distributed Computing and Artificial Intelligence
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] Evolutionary Approach for Autoaugment Using the Thermodynamical Genetic Algorithm2020

    • 著者名/発表者名
      A. Terauchi, N. Mori
    • 学会等名
      Proc. of 35th AAAI Conference on Artificial Intelligence (AAAI 2021)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] 文書要約のための階層型 Attention モデルの提案と Pointer Generator Network のための拡張手法2020

    • 著者名/発表者名
      寺西 弘樹, 岡田 真, 森 直樹
    • 学会等名
      第 34 回人工知能学会全国大会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] Focal Loss を利用した BERT による小説の段落境界推定2020

    • 著者名/発表者名
      飯倉 陸, 岡田 真, 森 直樹
    • 学会等名
      第 34 回人工知能学会全国大会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 人工知能による多義図形認識手法の提案及び解析2020

    • 著者名/発表者名
      堀江 紗世, 森 直樹
    • 学会等名
      第 34 回人工知能学会全国大会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 分散表現に基づく漫画の画像と台詞の対応識別2020

    • 著者名/発表者名
      寺内 光, 森 直樹, 上野 未貴
    • 学会等名
      第 34 回人工知能学会全国大会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] ファッションアイテムの分散表現に基づくコーディネート理解2020

    • 著者名/発表者名
      林 美衣, 森 直樹
    • 学会等名
      第 34 回人工知能学会全国大会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 深層学習に基づく 4 コマ漫画のセリフの感情推定とマルチモーダル化への検討2020

    • 著者名/発表者名
      高山 裕成, 岡田 真, 森 直樹
    • 学会等名
      情報処理学会関西支部支部大会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 漫画のオブジェクト順位データセットの構築と機械学習による内容理解の提案2020

    • 著者名/発表者名
      元山 直輝, 岡田 真, 森 直樹
    • 学会等名
      電情報通信学会第 4 回コミック工学研究会子
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 深層学習によるだまし絵認識手法の提案および解析2020

    • 著者名/発表者名
      堀江 紗世, 森 直樹
    • 学会等名
      NICOGRAPH2020
    • 関連する報告書
      2020 実績報告書
  • [学会発表] Photograph Classification Based on Main Theme and Multiple Values by Deep Neural Networks2020

    • 著者名/発表者名
      Toshinori Aoki, Miki Ueno
    • 学会等名
      Advances in Intelligent Systems and Computing
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] 撮影技術習得を目的とした複数の評価特徴に基づく写真創作の解析2020

    • 著者名/発表者名
      青木 俊憲, 上野 未貴
    • 学会等名
      人工知能学会全国大会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 深層学習を用いた手書き文字のフォーマルとカジュアルの分類2020

    • 著者名/発表者名
      突廻 恵太, 上野 未貴
    • 学会等名
      HAIシンポジウム
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 写真画像に基づく自動用紙推定の提案2020

    • 著者名/発表者名
      平井 喜一, 上野 未貴
    • 学会等名
      HAIシンポジウム
    • 関連する報告書
      2020 実績報告書
  • [学会発表] A Method to Estimate Request Sentences using LSTM with Self-Attention Mechanism2019

    • 著者名/発表者名
      T. Ueda, M. Okada, N. Mori and K. Hashimoto.
    • 学会等名
      8th International Congress on Advanced Applied Informatics
    • 関連する報告書
      2019 実績報告書
    • 国際学会
  • [学会発表] Deep Neural NetworkPretrained by a Support Vector Machine2019

    • 著者名/発表者名
      H. Yamamoto and N. Mori
    • 学会等名
      Proc. of The 14th International Joint Symposium on Artificial Intelligence and Natural Language Processing (iSAI-NLP 2019),
    • 関連する報告書
      2019 実績報告書
    • 国際学会
  • [学会発表] The novel index of the similarity between hand-drawn sketches for machine learning2019

    • 著者名/発表者名
      R. Fujii, N. Mori and M. Okada
    • 学会等名
      Proc. of The 14th International Joint Symposium on Artificial Intelligence and Natural Language Processing (iSAI-NLP 2019),
    • 関連する報告書
      2019 実績報告書
    • 国際学会
  • [学会発表] Dialogue Breakdown Detection for Understanding Comics with Deep Learning2019

    • 著者名/発表者名
      R. Iwasaki and N. Mori
    • 学会等名
      Proc. of The 14th International Joint Symposium on Artificial Intelligence and Natural Language Processing (iSAI-NLP 2019),
    • 関連する報告書
      2019 実績報告書
    • 国際学会
  • [学会発表] Hierarchical Attention Model for Acquiring Relationships Among Sentences2019

    • 著者名/発表者名
      H. Teranishi, M. Okada and N. Mori
    • 学会等名
      Proc. of The 14th International Joint Symposium on Artificial Intelligence and Natural Language Processing (iSAI-NLP 2019),
    • 関連する報告書
      2019 実績報告書
    • 国際学会
  • [学会発表] 筆順の類似度に関する評価モデルに対する考察2019

    • 著者名/発表者名
      藤井涼佑,森 直樹,岡田 真
    • 学会等名
      2019 年度人工知能学会全国大会講演論文集
    • 関連する報告書
      2019 実績報告書
  • [学会発表] segmented VRAE と遺伝的プログラミングに基づく音楽の創作2019

    • 著者名/発表者名
      山本周典,森 直樹
    • 学会等名
      2019 年度人工知能学会全国大会講演論文集
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 4 コマ漫画ストーリーデータセットにおけるコマ画像の分散表現に基づく解析2019

    • 著者名/発表者名
      寺内 光,森 直樹,上野未貴
    • 学会等名
      2019 年度人工知能学会全国大会講演論文集
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 自然言語処理に基づく4コマ漫画ストーリーデータセットの解析2019

    • 著者名/発表者名
      岩崎 凌,森 直樹,上野未貴
    • 学会等名
      2019 年度人工知能学会全国大会講演論文集
    • 関連する報告書
      2019 実績報告書
  • [学会発表] Long Short-Term Memory に基づく Recurrent Auto-Encoder を用いた文の分散表現獲得手法に対するAttention 機構の導入2019

    • 著者名/発表者名
      飯倉 陸, 岡田 真, 森 直樹
    • 学会等名
      情報処理学会 第241回 自然言語処理研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 座標情報に基づく漫画のオブジェクト順位推定2019

    • 著者名/発表者名
      元山直輝, 岡田 真, 森 直樹
    • 学会等名
      情報処理学会 第241回 自然言語処理研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 進化型機械学習フレームワークに基づくSVM-NNにおける感度解析2019

    • 著者名/発表者名
      小川恭子, 森 直樹
    • 学会等名
      2019 年電気学会電子・情報・システム部門大会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] A Comparative Study of The Corpus for Story Creation System2019

    • 著者名/発表者名
      Haruka Takahashi, Miki Ueno, Hitoshi Isahara
    • 学会等名
      Distributed Computing and Artificial Intelligence, 16th International Conference, Advances in Intelligent Systems and Computing
    • 関連する報告書
      2019 実績報告書
    • 国際学会
  • [学会発表] Considering Creative Stories from Interaction Perspective2019

    • 著者名/発表者名
      Miki Ueno
    • 学会等名
      7th International Conference on Human-Agent Interaction, iHAI2019
    • 関連する報告書
      2019 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] 創作者と人工知能が創る創作の未来2019

    • 著者名/発表者名
      上野 未貴
    • 学会等名
      人工知能学会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 創作支援を目的とした類似度調節によるストーリー生成システムの構築2019

    • 著者名/発表者名
      高橋 遼, 上野 未貴, 井佐原 均
    • 学会等名
      人工知能学会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 作中役割を考慮した物語文の類似文検索による創作者の支援と感性の解析2019

    • 著者名/発表者名
      葛井 健文, 上野 未貴, 井佐原 均
    • 学会等名
      人工知能学会
    • 関連する報告書
      2019 実績報告書

URL: 

公開日: 2019-04-18   更新日: 2024-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi