• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2023 Fiscal Year Research-status Report

空間放射特性によるバイオリン演奏技能の評価と3D映像による演奏支援システムの構築

Research Project

Project/Area Number 23K11293
Research InstitutionAichi Shukutoku University

Principal Investigator

牧 勝弘  愛知淑徳大学, 人間情報学部, 教授 (50447033)

Co-Investigator(Kenkyū-buntansha) 饗庭 絵里子  電気通信大学, 大学院情報理工学研究科, 准教授 (40569761)
Project Period (FY) 2023-04-01 – 2026-03-31
Keywordsバイオリン / 空間放射特性 / 指向性 / 熟練度 / マイクロホンアレイ / 多面体スピーカ
Outline of Annual Research Achievements

熟練度の違いにより生じるバイオリンの空間放射特性の違いを熟練度に応じたバイオリン音色の違いとして知覚できるのかを明らかにするために、42チャンネル球形スピーカにより熟練度別の空間放射特性を模擬した。バイオリンの種類に関わらず熟練者が演奏するバイオリン音には、400 Hz前後の下方向への放射指向性、1 kHz前後の正面方向への放射指向性、および3~4 kHz前後の上方向への放射指向性が強く表れることから、演奏者の周囲42ヶ所で録音した演奏音の各周波数におけるパワーバランスを変えることによって模擬的に3段階の熟練度を再現した。
次に、3D映像によるバイオリン演奏の支援を行うために、バイオリンの空間放射特性を可視化する方法について検討した。これまで、放射方向を明確化にするために、周波数ごとに42点の観測方位の中で最も低い音圧レベルを0 dBとして、そこからの差分を3D表示する方式を採用していた。しかし、この方式では演奏音の音圧レベルが低い場合であっても音が放射されているように見えることがあり、聴感上の音の強弱の感覚との齟齬が生じていた。そこで、最小音圧レベルからの差分をとった後に42方位の平均パワーを掛け合わせるという新たな可視化法を提案した。これにより、演奏支援のために放射指向性を可視化することと、聴感上の音の強弱の感覚との整合をとることの両方を実現することができた。
本課題の派生研究として、バイオリン研究のために構築した42チャンネル球状マイクロホンアレイを用いて発声の空間放射特性を調べた。その結果、800 kHz以下の低周波数成分は発声者の前方斜め下方向に放射されることや個人差が3 kHz以上に顕著に表れることが明らかとなった。音の空間分析は、バイオリン音だけでなく、発声の問題に関しても有効なアプローチ法となり得ることが示された。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本課題は、演奏の熟練度によって差が表れる空間放射特性とバイオリンの音色評価の関係性を実証し、空間放射特性とその3D映像を利用したバイオリン演奏の評価・支援システムを構築することを目的としている。
バイオリン演奏の熟練度によって差が表れる空間放射特性とバイオリンの音色評価の関係性の解明は概ね順調に進展している。2023年度は様々な熟練度の空間放射特性を模擬するための42チャネル球形スピーカ用の42チャンネル音源を作成することができた。
3D映像を利用したバイオリン演奏の評価・支援システムの構築についても概ね順調に進展している。2023年度はバイオリン音の空間放射特性の3D映像化のための可視化手法を新たに提案することができた。
派生研究として、本課題のバイオリン研究で構築した42チャンネル球状マイクロホンアレイを用いて発声の空間放射特性を調べた結果、バイオリン音だけでなく発声に対しても空間分析が有効であることを示すことができた。本課題が対象としているバイオリン音だけでなく歌唱における発声法についても熟練度を評価できる可能性が高くなった。

Strategy for Future Research Activity

バイオリン演奏の熟練度によって差が表れる空間放射特性とバイオリンの音色評価の関係性を解明するために、研究計画に従い、熟練度の異なる空間放射特性を模擬した球形スピーカの音に対する音色評価を行う。具体的には、種々の空間放射特性を持つ球形スピーカ音に対してシェッフェの一対比較法により「色彩感」「奥行き感」「力強さ」「立体感」等の優劣を調べる。先ずは楽器未経験者を対象に実験を行い、空間放射特性(熟練度)による差が知覚に現れない場合には、楽器経験者を対象に実験を行う。
3D映像を利用したバイオリン演奏の評価・支援システムを構築するために、研究計画に従い、バイオリン演奏音の3D映像化と演奏音の点数化を行う。先ずバイオリン各弦の開放弦の音を可視化し、次に音階音に発展させ、最終的に演奏曲の空間放射特性の可視化を行う。点数化に関しては、熟練奏者の空間放射パタンとの差分や類似性に基づいて熟練度の点数化を行う。具体的には、低、中、高周波数域における放射指向性の強さ、および放射方向の時間揺らぎ量に着目して点数化を行う。

Causes of Carryover

購入予定であった音響製品が欠品になったり、購入製品の納期が大幅に遅れたりしたことで次年度使用額が生じた。欠品や納期の遅れは世界的な半導体不足が原因であると思われる。2024年度も欠品や納期の遅れが続くようであれば、性能が多少劣ったとしても代替製品を購入し、予定通りに研究が進むように対処する予定である。

  • Research Products

    (4 results)

All 2024 2023

All Presentation (4 results) (of which Invited: 2 results)

  • [Presentation] 発声の3次元空間放射特性2024

    • Author(s)
      牧 勝弘, 饗庭 絵里子, 木谷 俊介, 天野 成昭
    • Organizer
      日本音響学会聴覚研究会・ヒューマンインフォメーション研究会・ヒューマン情報処理研究会・日本バーチャルリアリティ学会VR心理学研究委員会共催研究会
  • [Presentation] 42ch球状マイクロホンアレイを用いた発話の空間放射特性の計測2024

    • Author(s)
      牧 勝弘, 饗庭 絵里子, 木谷 俊介, 天野 成昭
    • Organizer
      日本音響学会第151回研究発表大会
  • [Presentation] 楽器とスピーカの音色~感性評価~2023

    • Author(s)
      牧 勝弘
    • Organizer
      感性材料の評価用AIの開発に関する研究会
    • Invited
  • [Presentation] 名器と名演奏家の音の特徴と感動を生む脳2023

    • Author(s)
      牧 勝弘
    • Organizer
      日本色彩学会美的感性研究会・日本色彩学会東海支部共催講演会
    • Invited

URL: 

Published: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi