• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

作者の意図抽出と文章の自動生成を融合した包括的な作文支援システム

研究課題

研究課題/領域番号 20K19878
研究種目

若手研究

配分区分基金
審査区分 小区分61030:知能情報学関連
研究機関国立研究開発法人産業技術総合研究所

研究代表者

渡邉 研斗  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 研究員 (50828324)

研究期間 (年度) 2020-04-01 – 2023-03-31
研究課題ステータス 完了 (2022年度)
配分額 *注記
4,290千円 (直接経費: 3,300千円、間接経費: 990千円)
2022年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2021年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2020年度: 1,690千円 (直接経費: 1,300千円、間接経費: 390千円)
キーワード歌詞情報処理 / 自然言語処理 / 音楽情報処理 / ヒューマンコンピュータインタラクション / 創作支援
研究開始時の研究の概要

小説や歌詞などの創作的文書の自動生成技術は深層学習の発展を背景に、文法や意味が正しい文を生成できるようになったが、生成文章の内容は一貫性や具体性に欠けるため、作者の意図を反映した文章を生成することは難しいタスクである。本課題では、作者の意図を説明可能なデータ構造として抽出する手法を設計し、さらに抽出された意図構造に基づいた文章を自動生成することで、作文作業がどこまで効率化され、作品の表現力がどこまで高められるかを明らかにする。そのステップとして、(1)作者の意図を表現するデータ構造の設計、(2)意図構造を抽出するインタラクションの設計、(3)作者の意図に基づく作文支援の有用性の調査を進める。

研究成果の概要

歌詞に書きたい内容は決まっているがどんなフレーズで書けばよいか思いつかないユーザに対して、ユーザの意図を反映した歌詞を生成し提案することで、作詞の発想を与える支援システムを開発した。この支援システムの開発過程で、計算機が歌詞の意味内容を捉えるためには歌詞から字面に関する情報を取り除き、意味だけを抽出することが効果的であると判明した。そこで字面情報を取り除く方法を調査した結果、ユーザが入力した文章を画像に変換することで、ユーザの意図のみを抽出することが可能となり、その画像から歌詞を生成することで、意図を反映した歌詞生成の性能向上が確認された。更に著作物の剽窃リスクを下げる歌詞生成手法も開発した。

研究成果の学術的意義や社会的意義

本研究によって、画像を用いた情報抽出手法が歌詞生成の性能向上に有効であることも示され、自然言語処理の分野において、意味情報のみを取り出す手法の一つとして、有用な知見を提供することを意味する。また、本研究成果が音楽制作において、作詞者や音楽プロデューサーの創造性を支援することが期待される。特に、作詞に苦手意識を持つ人や初心者にとって、意図を反映した歌詞生成が手助けとなると考えられる。また、著作権侵害の問題が深刻化するGenerative AIにおいて、著作物の剽窃リスクを下げる歌詞生成手法が開発されたことは、AI業界と音楽業界にとっても大きな意義を持つ。

報告書

(4件)
  • 2022 実績報告書   研究成果報告書 ( PDF )
  • 2021 実施状況報告書
  • 2020 実施状況報告書
  • 研究成果

    (8件)

すべて 2023 2021 2020

すべて 雑誌論文 (4件) (うち査読あり 4件、 オープンアクセス 2件) 学会発表 (4件) (うち国際学会 3件)

  • [雑誌論文] A Method To Detect Chorus Sections in Lyrics Text2023

    • 著者名/発表者名
      Kento Watanabe and Masataka Goto
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: -

    • 関連する報告書
      2022 実績報告書
    • 査読あり
  • [雑誌論文] Atypical Lyrics Completion Considering Musical Audio Signals2021

    • 著者名/発表者名
      Kento Watanabe and Masataka Goto
    • 雑誌名

      Proceedings of the 2nd Workshop on NLP for Music and Spoken Audio

      巻: 1 ページ: 37-41

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Atypical Lyrics Completion Considering Musical Audio Signals2021

    • 著者名/発表者名
      Kento Watanabe and Masataka Goto
    • 雑誌名

      Proceedings of the 27th International Conference on Multimedia Modeling

      巻: 1 ページ: 174-186

    • DOI

      10.1007/978-3-030-67832-6_15

    • ISBN
      9783030678319, 9783030678326
    • 関連する報告書
      2020 実施状況報告書
    • 査読あり
  • [雑誌論文] Lyrics Information Processing: Analysis, Generation, and Applications2020

    • 著者名/発表者名
      Kento Watanabe and Masataka Goto
    • 雑誌名

      Proceedings of the 1st Workshop on NLP for Music and Audio

      巻: 1 ページ: 6-11

    • 関連する報告書
      2020 実施状況報告書
    • 査読あり / オープンアクセス
  • [学会発表] 入力文章の内容に沿った新たな歌詞を生成する作詞支援システムと剽窃リスクを下げる歌詞生成手法2023

    • 著者名/発表者名
      渡邉 研斗, 後藤 真孝
    • 学会等名
      言語処理学会第29回年次大会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] Atypical Lyrics Completion Considering Musical Audio Signals2021

    • 著者名/発表者名
      Kento Watanabe and Masataka Goto
    • 学会等名
      the 2nd Workshop on NLP for Music and Spoken Audio
    • 関連する報告書
      2021 実施状況報告書
    • 国際学会
  • [学会発表] Atypical Lyrics Completion Considering Musical Audio Signals2021

    • 著者名/発表者名
      Kento Watanabe and Masataka Goto
    • 学会等名
      The 27th International Conference on Multimedia Modeling
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会
  • [学会発表] Lyrics Information Processing: Analysis, Generation, and Applications2020

    • 著者名/発表者名
      Kento Watanabe and Masataka Goto
    • 学会等名
      The 1st Workshop on NLP for Music and Audio
    • 関連する報告書
      2020 実施状況報告書
    • 国際学会

URL: 

公開日: 2020-04-28   更新日: 2025-11-21  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi