• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

情報学と神経科学を融合した音楽コンテンツに対する嗜好の推定・活用・制御技術の研究

研究課題

研究課題/領域番号 21H04917
研究種目

基盤研究(A)

配分区分補助金
応募区分一般
審査区分 中区分62:応用情報学およびその関連分野
研究機関国立研究開発法人産業技術総合研究所

研究代表者

後藤 真孝  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 首席研究員 (20357007)

研究分担者 古屋 晋一  一般社団法人NeuroPiano(研究開発部), 研究開発部, シニアリサーチャー (20509690)
濱崎 雅弘  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 研究グループ付 (50419016)
中野 倫靖  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 研究グループ長 (10572927)
加藤 淳  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (70738054)
佃 洸摂  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 主任研究員 (40760020)
渡邉 研斗  国立研究開発法人産業技術総合研究所, 情報・人間工学領域, 研究員 (50828324)
研究期間 (年度) 2021-04-05 – 2024-03-31
研究課題ステータス 完了 (2023年度)
配分額 *注記
42,250千円 (直接経費: 32,500千円、間接経費: 9,750千円)
2023年度: 13,520千円 (直接経費: 10,400千円、間接経費: 3,120千円)
2022年度: 13,520千円 (直接経費: 10,400千円、間接経費: 3,120千円)
2021年度: 15,210千円 (直接経費: 11,700千円、間接経費: 3,510千円)
キーワード音楽情報処理 / 嗜好推定 / 音楽推薦 / 鑑賞支援インタフェース / 鑑賞支援 / 創作支援 / 音楽解析
研究開始時の研究の概要

本研究では、音楽コンテンツ(楽曲や音楽動画)に対する個人の嗜好(好き嫌い)を推定し、それを鑑賞支援・創作支援に活用する方法を明らかにすることに加え、個人の嗜好を改変・防御するような制御ができる可能性があることを示す。そのために、情報学に基づくアプローチで音楽聴取履歴に加えて音楽解析結果も活用して嗜好を推定し、さらに、神経科学に基づくアプローチで生理計測指標から嗜好を推定する新たな手法を実現する。

研究成果の概要

本研究課題では、音楽コンテンツに対する嗜好の推定・活用・制御技術の実現方法に対する理解を深める以下の三つの課題に取り組んだ。「嗜好の推定」の課題では、ユーザがどの楽曲群を好きだと入力したかという大規模データを解析して嗜好を推定した。さらに、音楽嗜好に関連する脳機能計測・生理計測データを用いて、簡易生理指標から嗜好を推定するモデル等を構築した。「嗜好の活用」の課題では、推定した嗜好や楽曲間の類似度等に基づく音楽推薦手法と、それを活用した個人適応型の鑑賞支援インタフェース等を実現した。「嗜好の制御」の課題では、ユーザの嗜好と多数の楽曲との関係を可視化できる鑑賞支援インタフェース等を実現した。

研究成果の学術的意義や社会的意義

音楽コンテンツに対する嗜好を推定して音楽推薦等で活用する技術は膨大なデジタルコンテンツの普及とともに重要性を増しており、人々が好みのコンテンツに出会え、多様なコンテンツがそれを好む人々に届くことは、コンテンツ文化を豊かにする意義がある。本研究のように情報学と神経生理学の研究者が議論をしながら、嗜好の推定・活用・制御の三つの課題に取り組む学術研究は先駆的である。情報学に基づく音楽推薦や神経科学に基づく脳機能計測・生理計測によって音楽の嗜好を推定した上で、音楽サービスで活用可能にすることは今後一層重要になるが、さらにユーザ自身がその推定結果を可視化等を通じて把握可能にすることも重要になっていく。

報告書

(5件)
  • 2023 実績報告書   研究成果報告書 ( PDF )
  • 2022 実績報告書
  • 2021 審査結果の所見   実績報告書
  • 研究成果

    (19件)

すべて 2024 2023 2022

すべて 雑誌論文 (2件) (うち査読あり 2件、 オープンアクセス 2件) 学会発表 (17件) (うち国際学会 11件、 招待講演 3件)

  • [雑誌論文] MDX-Mixer: Music Demixing by Leveraging Source Signals Separated by Existing Demixing Models2024

    • 著者名/発表者名
      Tomoyasu Nakano, Masataka Goto
    • 雑誌名

      IEICE Transactions on Information and Systems

      巻: E107.D 号: 8 ページ: 1079-1088

    • DOI

      10.1587/transinf.2023EDP7044

    • ISSN
      0916-8532, 1745-1361
    • 年月日
      2024-08-01
    • 関連する報告書
      2023 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Self-Supervised Contrastive Learning for Singing Voices2022

    • 著者名/発表者名
      Hiromu Yakura, Kento Watanabe, Masataka Goto
    • 雑誌名

      IEEE/ACM Transactions on Audio, Speech, and Language Processing

      巻: 30 ページ: 1614-1623

    • DOI

      10.1109/taslp.2022.3169627

    • 関連する報告書
      2022 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] 複数人による音楽アノテーション結果の項目反応理論に基づく統合と機械学習への応用2024

    • 著者名/発表者名
      中野 倫靖, 後藤 真孝
    • 学会等名
      情報処理学会 音楽情報科学研究会
    • 関連する報告書
      2023 実績報告書
  • [学会発表] ダイナフォーミックス:音楽を創造する喜びを創出する研究・開発・教育2023

    • 著者名/発表者名
      古屋 晋一
    • 学会等名
      音学シンポジウム2023 (情報処理学会 音楽情報科学研究会)
    • 関連する報告書
      2023 実績報告書
    • 招待講演
  • [学会発表] Overcoming the Ceiling Effect in Musicians2023

    • 著者名/発表者名
      Shinichi Furuya
    • 学会等名
      ICMPC 2023 Symposium "Adaptive and maladaptive learning in musicians"
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Decoding Drums, Instrumentals, Vocals, and Mixed Sources in Music Using Human Brain Activity2023

    • 著者名/発表者名
      Vincent Cheung, Lana Okuma, Kazuhisa Shibata, Kosetsu Tsukuda, Masataka Goto, Shinichi Furuya
    • 学会等名
      Proceedings of the 24th International Society for Music Information Retrieval Conference (ISMIR 2023)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Transformer-based Beat Tracking with Low-resolution Encoder and High-resolution Decoder2023

    • 著者名/発表者名
      Tian Cheng, Masataka Goto
    • 学会等名
      Proceedings of the 24th International Society for Music Information Retrieval Conference (ISMIR 2023)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Unveiling the Impact of Musical Factors in Judging a Song on First Listen: Insights from a User Survey2023

    • 著者名/発表者名
      Kosetsu Tsukuda, Tomoyasu Nakano, Masahiro Hamasaki, Masataka Goto
    • 学会等名
      Proceedings of the 24th International Society for Music Information Retrieval Conference (ISMIR 2023)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Chorus-Playlist: Exploring the Impact of Listening to Only Choruses in a Playlist2023

    • 著者名/発表者名
      Kosetsu Tsukuda, Masahiro Hamasaki, Masataka Goto
    • 学会等名
      Proceedings of the 24th International Society for Music Information Retrieval Conference (ISMIR 2023)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] Music Source Separation with MLP Mixing of Time, Frequency, and Channel2023

    • 著者名/発表者名
      Tomoyasu Nakano, Masataka Goto
    • 学会等名
      Proceedings of the 24th International Society for Music Information Retrieval Conference (ISMIR 2023)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] A Music Exploration Interface Based on Vocal Timbre and Pitch in Popular Music2023

    • 著者名/発表者名
      Tomoyasu Nakano, Momoka Sasaki, Mayuko Kishi, Masahiro Hamasaki, Masataka Goto, and Yoshinori Hijikata
    • 学会等名
      Proceedings of the 16th International Symposium on Computer Music Multidisciplinary Research (CMMR 2023)
    • 関連する報告書
      2023 実績報告書
    • 国際学会
  • [学会発表] U-Beat: A Multi-Scale Beat Tracking Model Based on Wave-U-Net2023

    • 著者名/発表者名
      Tian Cheng, Masataka Goto
    • 学会等名
      IEEE ICASSP 2023 (The 2023 IEEE International Conference on Acoustics, Speech, and Signal Processing)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] Self-Supervised Contrastive Learning for Singing Voices2023

    • 著者名/発表者名
      Hiromu Yakura, Kento Watanabe, Masataka Goto
    • 学会等名
      IEEE ICASSP 2023 (The 2023 IEEE International Conference on Acoustics, Speech, and Signal Processing)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] 歌声のための自己教師あり対照学習による特徴量表現の獲得手法2022

    • 著者名/発表者名
      矢倉 大夢, 渡邉 研斗, 後藤 真孝
    • 学会等名
      情報処理学会 音楽情報科学研究会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] MDX-Mixer: 複数の音楽音源分離モデルによる出力波形を時変混合するシステム2022

    • 著者名/発表者名
      中野 倫靖, 後藤 真孝
    • 学会等名
      情報処理学会 音楽情報科学研究会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] 基調講演「メディアコンテンツの大規模蓄積・解析が生み出す価値」2022

    • 著者名/発表者名
      後藤 真孝
    • 学会等名
      データサイエンティスト協会 9thシンポジウム
    • 関連する報告書
      2022 実績報告書
    • 招待講演
  • [学会発表] Rapidly Predicting Music Artistic Expression Preference From Heart Rate and Respiration Rate2022

    • 著者名/発表者名
      Shu Sakamoto, Vincent Cheung, Shinichi Furuya
    • 学会等名
      ISMIR 2022 (The 23rd International Society for Music Information Retrieval Conference) Late-Breaking/Demo Session
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] What can music preference teach us about the auditory mismatch negativity?2022

    • 著者名/発表者名
      Vincent Cheung, Shinichi Furuya
    • 学会等名
      MMN 2022 (The 9th Mismatch Negativity Conference)
    • 関連する報告書
      2022 実績報告書
    • 国際学会
  • [学会発表] 音楽家の卓越した技能を支える感覚運動統合機能2022

    • 著者名/発表者名
      古屋 晋一
    • 学会等名
      日本音響学会 第148回(2022年秋季)研究発表会
    • 関連する報告書
      2022 実績報告書
    • 招待講演

URL: 

公開日: 2021-04-28   更新日: 2025-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi