視覚と触覚による材質感認知メカニズムをオノマトペの音象徴性から探る

• Project Area: Integrative studies of neural mechanisms and advanced information technologies for perception of material and surface qualities
• Project/Area Number: 25135713
• Research Category: Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area)
• Allocation Type: Single-year Grants
• Review Section: Complex systems
• Research Institution: The University of Electro-Communications
• Principal Investigator: 坂本 真樹 電気通信大学, 情報理工学(系)研究科, 准教授 (80302826)
• Project Period (FY): 2013-04-01 – 2015-03-31
• Project Status: Completed (Fiscal Year 2014)
• Budget Amount: ¥12,090,000 (Direct Cost: ¥9,300,000、Indirect Cost: ¥2,790,000); Fiscal Year 2014: ¥6,240,000 (Direct Cost: ¥4,800,000、Indirect Cost: ¥1,440,000); Fiscal Year 2013: ¥5,850,000 (Direct Cost: ¥4,500,000、Indirect Cost: ¥1,350,000)
• Keywords: オノマトペ / 質感 / 感性 / 質感評価システム / 自動生成システム / 数値化 / 商品検索 / 音象徴語 / 視覚 / 触覚 / 音象徴 / 感性情報 / システム

Outline of Annual Research Achievements

短く簡潔な表現でありながら，材質から知覚した質感と快不快などの感性的評価まで多様な情報が表されるオノマトペの特長を活かし，従来の形容詞を用いて測定されてきた人の主観評価を定量化するために，2012～2013年度の質感脳情報学の助成を受け，オノマトペによって表される触感を中心とした材質感や感性評価値を推定するシステムを構築した．2014～2015年度の研究課題では，このシステムを活用し，視覚と触覚による材質感認知メカニズムにアプローチした．システムの活用成果例として，粘性知覚とオノマトペの関係に着目し，粘性画像推薦システムを構築した．直感的で柔軟な質感表現段であるオノマトペの音象徴性に注目し，被験者実験により，粘性感とオノマトペの音韻の関係を明らかにした．本研究で実施した被験者実験の結果から，オノマトペを構成する音韻と視覚的に知覚される粘性との間に有意な関係が認められ，子音では”g ”，”s ”，”z ”，”d ”，”n ”，”m”，母音では”a ”，”i ”，”u ”，”e ”，”o ”が粘性と有意に関係し，拗音，長音，促音の有無が粘性と有意に関係することを特定した．また，動画，静止画の違いが粘性知覚に影響すると仮定し，両者では観測される音韻に違いが認められるか検討し，観測される音韻の違いを明らかにした．これらの結果から人は視覚的に知覚される液体粘性の僅かな違いをオノマトペの音韻に反映させていると言える．この実験結果の応用の一例として，「どろどろ」した動画が欲しいといったユーザの直感的な表現に適した動画を推薦するシステムを構築した．その他，オノマトペと触素材の関係を個人の主観により操作可能にするシステムや，オノマトペによる質感カテゴリと画像特徴量の関係を用いた画像検索システム，オノマトペを絵本に自動挿入するシステムや，オノマトペによる快音作成支援などにも取り組んだ．

Research Progress Status

26年度が最終年度であるため、記入しない。

Strategy for Future Research Activity

26年度が最終年度であるため、記入しない。

Research Products

• [Journal Article] Possibility to Use Product Image and Review Text Based on the Association between Onomatopoeia and Texture (2015)
  • Author(s): 土斐崎龍一，飯場咲紀，岡谷貴之，坂本真樹
  • Journal Title: Transactions of the Japanese Society for Artificial Intelligence Volume: 30 Issue: 1 Pages: 124-137
  • DOI: 10.1527/tjsai.30.124
  • NAID: 130004927383
  • ISSN: 1346-0714, 1346-8030
  • Peer Reviewed / Open Access
• [Journal Article] Sound Symbolism on Viscosity Perception (2015)
  • Author(s): 鍵谷龍樹，白川由貴，土斐崎龍一，渡邊淳司，丸谷和史，河邉隆寛，坂本真樹
  • Journal Title: Transactions of the Japanese Society for Artificial Intelligence Volume: 30 Issue: 1 Pages: 237-245
  • DOI: 10.1527/tjsai.30.237
  • NAID: 130004927359
  • ISSN: 1346-0714, 1346-8030
  • Peer Reviewed / Open Access / Acknowledgement Compliant
• [Journal Article] A System to Generate Onomatopoeia Corresponding to User's Impressions (2015)
  • Author(s): 清水祐一郎，土斐崎龍一，鍵谷龍樹，坂本真樹
  • Journal Title: Transactions of the Japanese Society for Artificial Intelligence Volume: 30 Issue: 1 Pages: 319-330
  • DOI: 10.1527/tjsai.30.319
  • NAID: 130004927350
  • ISSN: 1346-0714, 1346-8030
  • Peer Reviewed / Open Access / Acknowledgement Compliant
• [Journal Article] オノマトペ分布図を利用した触素材感性評価傾向の可視化 (2014)
  • Author(s): 渡邊淳司，加納有梨紗，坂本真樹
  • Journal Title: 日本感性工学会論文誌 Volume: 13(2) Pages: 353-359
  • NAID: 130004957863
  • Peer Reviewed / Open Access / Acknowledgement Compliant
• [Journal Article] A System to Estimate an Impression Conveyed by Onomatopoeia (2014)
  • Author(s): 清水祐一郎，土斐崎龍一，坂本真樹
  • Journal Title: Transactions of the Japanese Society for Artificial Intelligence Volume: 29 Issue: 1 Pages: 41-52
  • DOI: 10.1527/tjsai.29.41
  • NAID: 130003382437
  • ISSN: 1346-0714, 1346-8030
  • Peer Reviewed / Open Access / Acknowledgement Compliant
• [Journal Article] 自然言語による感性的質感評価を定量化するシステム (2013)
  • Author(s): 坂本真樹、渡邊淳司
  • Journal Title: ケミカルエンジニアリング Volume: 58(3) Pages: 13-19
• [Journal Article] 手触りの質を表すオノマトペの有効性ー感性語との比較を通して (2013)
  • Author(s): 坂本真樹、渡邊淳司
  • Journal Title: 日本認知言語学会論文集 Volume: 13 Pages: 473-485
  • NAID: 40019666367
• [Journal Article] 「さらさら」「ふわふわ」という言葉が表す質感・感性情報の定量化による製品開発支援 (2013)
  • Author(s): 坂本真樹、渡邊淳司
  • Journal Title: Fragrance Journal Volume: 2013-7 Pages: 66-72
• [Journal Article] オノマトペによる画像色彩推薦 (2013)
  • Author(s): 土斐崎龍一、飯場咲紀、及川歩唯、清水祐一郎、坂本真樹
  • Journal Title: 日本バーチャルリアリティ学会論文誌 Volume: 18(4) Pages: 455-463
  • Peer Reviewed
• [Presentation] Tactile Experience Is Evoked by Visual Image of Materials: Evidence from Onomatopoeia (2015)
  • Author(s): Maki Sakamoto, Tatsuki Kagitani, Ryuichi Doizaki
  • Organizer: the 37th Annual Meeting of the Cognitive Science Society (CogSci2015)
  • Place of Presentation: Pasadena, California, USA
  • Year and Date: 2015-07-23 – 2015-07-25
• [Presentation] Quantification of the Operational Feelings of HMI Devices Based on the Sound Symbolism of Onomatopoeia (2015)
  • Author(s): Yusuke Kusaba, Ryuichi Doizaki, Maki Sakamoto
  • Organizer: International Society of Affective Science and Engineering (ISASE2015)
  • Place of Presentation: Tokyo, Japan
  • Year and Date: 2015-03-22 – 2015-03-23
• [Presentation] A System for Evaluating Tactile Feelings Expressed by Sound Symbolic Words (2014)
  • Author(s): Ryuichi Doizaki, Junji Watanabe, Maki Sakamoto
  • Organizer: Euro Haptics
  • Place of Presentation: Versailles, France
  • Year and Date: 2014-06-24 – 2014-06-27
• [Presentation] Sound Symbolic Relationship between Onomatopoeia and Emotional Evaluations in Taste (2014)
  • Author(s): Tatsuki Kagitani, Mao Goto, Junji Watanabe, Maki Sakamoto
  • Organizer: 36th Annual Meeting of the Cognitive Science Society
  • Place of Presentation: Quebec City, Canada
• [Presentation] A System for Evaluating Tactile Feelings Expressed by Sound Symbolic Words (2014)
  • Author(s): Ryuichi Doizaki, Junji Watanabe, Maki Sakamoto
  • Organizer: EuroHaptics 2014
  • Place of Presentation: Versailles, France
• [Presentation] Sound Symbolic Relationship Between Onomatopoeias and Emotional Evaluations in Taste and Touch (2013)
  • Author(s): Junji Watanabe, Maki Sakamoto
  • Organizer: 9th International Symposium on Iconicity in Language and Literature
  • Place of Presentation: Tokyo, Japan
• [Presentation] System of Generating Japanese Sound Symbolic Expressions Using Genetic Algorithm (2013)
  • Author(s): Yuichiro Shimizu, Tetsuaki Nakamura, Maki Sakamoto
  • Organizer: 15th International Conference on Human-Computer Interaction
  • Place of Presentation: Las Vegas, USA
  • Invited
• [Presentation] Development of Tactile Materials Representing Human Basic Tactile Sensations (2013)
  • Author(s): Maki Sakamoto, Junya Yoshino, Junji Watanabe
  • Organizer: 5th International Congress of International Association of Societies of Design Research
  • Place of Presentation: Tokyo, Japan
• [Presentation] Intuitive Color Design Support System Using Onomatopoeia (2013)
  • Author(s): Ryuichi Doizaki, Ai Oikawa, Yuichiro Shimizu, Maki Sakamoto
  • Organizer: 5th International Congress of International Association of Societies of Design Research
  • Place of Presentation: Tokyo, Japan
• [Presentation] Sound Symbolic Words Are More Easily Associated with Real Metal Than Imitation (2013)
  • Author(s): Junya Yoshino, Akira Yakata, Yuichiro Shimizu, Masaharu Haginoya, Maki Sakamoto
  • Organizer: 5th International Congress of International Association of Societies of Design Research
  • Place of Presentation: Tokyo, Japan
• [Presentation] Product Recommendation Method based on Onomatopoeia Expressing Texture (2013)
  • Author(s): Ryuichi Doizaki, Saki Iiba, Takashi Abe, Takayuki Okatani, Maki Sakamoto
  • Organizer: 2nd Asian Conference on Information Systems
  • Place of Presentation: Phuket, Thailand
• [Presentation] Method of Evaluating Metal Textures by the Sound Symbolism of Onomatopoeia (2013)
  • Author(s): Junya Yoshino, Akira Yakata, Yuichiro Shimizu, Masaharu Haginoya, Maki Sakamoto
  • Organizer: 2nd Asian Conference on Information Systems
  • Place of Presentation: Phuket, Thailand
• [Presentation] Method of Generating Japanese Sound Symbolic Expressions (2013)
  • Author(s): Yuichiro Shimizu, Tatsuki Kagitani, Maki Sakamoto
  • Organizer: Sound Symbolism Workshop 2013
  • Place of Presentation: Tokyo, Japan
• [Presentation] A System to Evaluate Sound Symbolic Effects of Brand Name (2013)
  • Author(s): Ryuichi Doizaki, Yuichiro Shimizu, Maki Sakamoto
  • Organizer: Sound Symbolism Workshop 2013
  • Place of Presentation: Tokyo, Japan
• [Presentation] Onomatopoeic Words Are More Easily Associated with Real Metal than Imitation (2013)
  • Author(s): Junya Yoshino, Yuichiro Shimizu, Masaharu Haginoya, Maki Sakamoto
  • Organizer: Sound Symbolism Workshop 2013
  • Place of Presentation: Tokyo, Japan
• [Presentation] オノマトペ感性評価システムの商品ページ検索への利活用 (2013)
  • Author(s): 土井崎龍一、飯場咲、阿部巌、岡谷貴之、坂本真樹
  • Organizer: 第27回人工知能学会全国大会口頭発表
  • Place of Presentation: 富山市、日本
• [Presentation] オノマトペ感性評価システムのＨＭＩデバイス操作感評価における利活用 (2013)
  • Author(s): 清水祐一郎、吉村圭悟、上田祐也、坂本真樹
  • Organizer: 第27回人工知能学会全国大会口頭発表
  • Place of Presentation: 富山市、日本
• [Presentation] 金属調加飾デザイン評価へのオノマトペの利活用 (2013)
  • Author(s): 吉野淳也、屋形叡、清水祐一郎、萩野谷雅春、坂本真樹
  • Organizer: 第27回人工知能学会全国大会口頭発表
  • Place of Presentation: 富山市、日本
• [Presentation] オノマトペの質感印象に基づく商品ページ検索の可能性
  • Author(s): 坂本真樹
  • Organizer: ARG Webインテリジェンスとインタラクション研究会第１回ステージ発表
  • Place of Presentation: 神奈川県、日本
  • Invited
• [Presentation] Diverse Feelings Expressed by Sound Symbolic Words: Onomatopoeia
  • Author(s): Maki Sakamoto
  • Organizer: Workshop in the IEEE World Hptics Conference 2013
  • Place of Presentation: Daejeon, Korea
  • Invited
• [Presentation] A System to Estimate Diverse Feelings Expressed by Sound Symbolic Words
  • Author(s): Maki Sakamoto
  • Organizer: the Shanghai Jiao Tong University Cognitive Science Workshop
  • Place of Presentation: Shanghai, China
  • Invited
• [Presentation] 質感を表す言語表現による質感認知へのアプローチ
  • Author(s): 坂本真樹
  • Organizer: 平成25年度応用脳科学コンソーシアム 第5回質感脳情報学研究会
  • Place of Presentation: 東京都、日本
  • Invited
• [Book] 実践的官能特性評価事例集 (2014)
  • Author(s): 坂本真樹，渡邊淳司
  • Publisher: 技術情報協会
• [Book] 触覚認識メカニズムと応用技術-触覚センサ・触覚ディスプレイ-【増補版】 (2014)
  • Author(s): 坂本真樹，渡邊淳司
  • Publisher: S&T出版
• [Book] 触覚認識メカニズムと応用技術-触覚センサ・触覚ディスプレイ-【増補版】 (2014)
  • Author(s): 坂本真樹、渡邊淳司
  • Total Pages: 666
  • Publisher: S&T出版
• [Book] 実践的官能特性評価 事例集 (2014)
  • Author(s): 坂本真樹、渡邊淳司
  • Publisher: 技術情報協会
• [Book] オノマトペ研究の射程－近づく音と意味 (2013)
  • Author(s): 坂本真樹、渡邊淳司
  • Total Pages: 403
  • Publisher: ひつじ書房
• [Remarks]
  • URL: http://sakamoto-lab.hc.uec.ac.jp/
• [Patent(Industrial Property Rights)] 音象徴語の感覚関連性分布図生成装置 (2014)
  • Inventor(s): 坂本真樹
  • Industrial Property Rights Holder: 電気通信大学
  • Industrial Property Rights Type: 特許
  • Industrial Property Number: 2014-157793
  • Filing Date: 2014-08-01