• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2021 Fiscal Year Annual Research Report

Integrative understanding of deep SHITSUKAN recognition from visual, auditory, tactile and linguistic information

Planned Research

Project AreaAnalysis and synthesis of deep SHITSUKAN information in the real world
Project/Area Number 20H05957
Research InstitutionKyoto University

Principal Investigator

西田 眞也  京都大学, 情報学研究科, 教授 (20396162)

Co-Investigator(Kenkyū-buntansha) 堀内 隆彦  千葉大学, 大学院工学研究院, 教授 (30272181)
上村 卓也  日本電信電話株式会社NTTコミュニケーション科学基礎研究所, 人間情報研究部, 研究員 (10829394)
梶本 裕之  電気通信大学, 大学院情報理工学研究科, 教授 (80361541)
坂本 真樹  電気通信大学, 大学院情報理工学研究科, 教授 (80302826)
Project Period (FY) 2020-11-19 – 2025-03-31
Keywords質感 / 価値 / 情動 / リアリティ / アート
Outline of Annual Research Achievements

・研究代表者の西田らは、新しいポスドク研究員を採用し、人間が脳内に構築する外界モデルの特性を検討するために、質感情報(光学的特性)が運動速度の推定や、運動変形の検出に与える影響を心理物理的に検討した。周辺視における質感情報の低下を刺激サイズで補うという発想のディスプレイの特性を検討した。視覚と触覚の空間情報処理の比較を進めた。 ・研究分担者の堀内らは、前年度に引き続き、照明の多様性が表層質感に与える影響を解析し、主に皮革や金属を対象として、実物の物理情報と知覚量の関係のモデル化に取り組んだ。・研究分担者の上村らは、前年度に引き続き、音認識で訓練したニューラルネットワークを用いて振幅変調検出実験のシミュレーションを行った。複数の刺激パラメータについて振幅変調検出閾値をヒトと比較した。 ・研究分担者の梶本らは、前年度に引き続き、人肌をなでる際の触感の生成に取り組み、人工人肌モデルを3D形状計測した結果に基づいて振動生成することで人肌感を生成できることを実証した。 ・研究分担者の坂本らは、合成皮革素材48種類を対象とし、素材の質感をオノマトペで評価してもらう被験者実験を行い、オノマトペの音素や構造をモデルの入力(説明変数)とし、合成皮革素材の物性値を目的変数とする非線形回帰モデルを構築し、その精度について検証した。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

西田は、コロナ感染症の拡大防止措置のためポスドク研究員の来日が遅れるなどしたが、2021年8月からは予定された研究がスタートした。未使用となった人件費分を翌年度に持ち越し、計算機か環境の整備に使った。ほかの研究室においても、順調に研究が進んだ。

Strategy for Future Research Activity

・研究代表者の西田は、視覚と触覚の深奥質感処理の比較、および多感覚の深奥質感への情報統合を研究する。人間が脳内に構築する外界モデルの特性を検討するために、質感情報(光学的特性)が運動速度や形状変形の推定に与える影響を検討する。 ・研究分担者の堀内は、視覚系を中心とした実物の物理情報と知覚量の関係をモデル化した上で、質感情報の適切な画像再現を試みる。・研究分担者の上村は、自然な音環境認識のために訓練された人工神経回路 を聴覚系のモデルと見立てる。音源の質感知覚に重要な特徴である振幅変調に着目し、変調への感度を、音認識で訓練した人工神経回路と人間で比較する。このため、両者に変調検出の心理物理実験を行う。 ・研究分担者の梶本は、人肌質感の再現の一環として温度感覚提示に基づく触感提示に取り組む。さらに柔軟感に関して力覚と皮膚感覚の融合提示を精緻化する。・研究分担者の坂本は、実物-物理量-知覚量-感性言語(オノマトペ)を組み合わせた質感データベースの拡充を行うととも に、このデータベースを利用したシステムの開発に着手する。

  • Research Products

    (50 results)

All 2022 2021 Other

All Int'l Joint Research (1 results) Journal Article (11 results) (of which Int'l Joint Research: 1 results,  Peer Reviewed: 3 results,  Open Access: 2 results) Presentation (36 results) (of which Int'l Joint Research: 15 results,  Invited: 2 results) Book (2 results)

  • [Int'l Joint Research] デルフト大学(オランダ)

    • Country Name
      NETHERLANDS
    • Counterpart Institution
      デルフト大学
  • [Journal Article] Visual discrimination of optical material properties: A large-scale study2022

    • Author(s)
      Sawayama Masataka、Dobashi Yoshinori、Okabe Makoto、Hosokawa Kenchi、Koumura Takuya、Saarela Toni P.、Olkkonen Maria、Nishida Shin'ya
    • Journal Title

      Journal of Vision

      Volume: 22 Pages: 17~17

    • DOI

      10.1167/jov.22.2.17

    • Peer Reviewed / Open Access / Int'l Joint Research
  • [Journal Article] A Robust Approach for Reproducing the Haptic Sensation of Sandpaper With Different Roughness During Bare Fingertip Interaction2022

    • Author(s)
      Zhang Jianyao、Kajimoto Hiroyuki
    • Journal Title

      Frontiers in Virtual Reality

      Volume: 3 Pages: 829946

    • DOI

      10.3389/frvir.2022.829946

  • [Journal Article] Glossiness Index of Objects in Halftone Color Images Based on Structure and Appearance Distortion2022

    • Author(s)
      Li Donghui、Tanaka Midori、Horiuchi Takahiko
    • Journal Title

      Journal of Imaging

      Volume: 8 Pages: 59~59

    • DOI

      10.3390/jimaging8030059

  • [Journal Article] 柔軟物映像提示時のオノマトペと物性の関連性2022

    • Author(s)
      金田 実久、竹内 将大、金子 征太郎、梶本 裕之
    • Journal Title

      日本バーチャルリアリティ学会論文誌

      Volume: 27 Pages: 33~39

    • DOI

      10.18974/tvrsj.27.1_33

  • [Journal Article] 購買履歴のない顧客の感性を推定する技術2022

    • Author(s)
      坂本真樹
    • Journal Title

      Fragrance Journal

      Volume: 50(2) Pages: 51-57

  • [Journal Article] The roles of lower- and higher-order surface statistics in tactile texture perception2021

    • Author(s)
      Kuroki Scinob、Sawayama Masataka、Nishida Shin’ya
    • Journal Title

      Journal of Neurophysiology

      Volume: 126 Pages: 95~111

    • DOI

      10.1152/jn.00577.2020

    • Peer Reviewed / Open Access
  • [Journal Article] Glossy Appearance Editing for Heterogeneous Material Objects2021

    • Author(s)
      Manabe Yusuke、Tanaka Midori、Horiuchi Takahiko
    • Journal Title

      Journal of Imaging Science and Technology

      Volume: 65 Pages: 60406

    • DOI

      10.2352/J.ImagingSci.Technol.2021.65.6.060406

    • Peer Reviewed
  • [Journal Article] Perception modeling based on vision and touch: “authenticity” of leather defined through observational experience2021

    • Author(s)
      Watanabe Shuhei、Horiuchi Takahiko
    • Journal Title

      Textile Research Journal

      Volume: 91 Pages: 2106~2124

    • DOI

      10.1177/0040517521998034

  • [Journal Article] Computer Vision System for Expressing Texture Using Sound-Symbolic Words2021

    • Author(s)
      Yamagata Koichi、Kwon Jinhwan、Kawashima Takuya、Shimoda Wataru、Sakamoto Maki
    • Journal Title

      Frontiers in Psychology

      Volume: 12 Pages: 654779

    • DOI

      10.3389/fpsyg.2021.654779

  • [Journal Article] Reproducing Brain Functions and Evaluating Its Structure for Creating the Brain2021

    • Author(s)
      Koumura Takuya
    • Journal Title

      The Brain & Neural Networks

      Volume: 28 Pages: 183~191

    • DOI

      10.3902/jnns.28.183

  • [Journal Article] Withコロナ時代のコミュニケーションに有用な「感性の見える化」2021

    • Author(s)
      坂本真樹
    • Journal Title

      Oplus E

      Volume: 43(3) Pages: 270-275

  • [Presentation] 中心視野と周辺視野で公平なディスプレイデザインの視覚心理学的検討2022

    • Author(s)
      松永 大河, Yung-Hao Yang, 三好 清文, 西田 眞也
    • Organizer
      映像情報メディア学会ヒューマンインフォメーション研究会
  • [Presentation] Glossy Appearance Editing for Heterogeneous Material Objects2022

    • Author(s)
      Yusuke Manabe, Midori Tanaka, Takahiko Horiuchi
    • Organizer
      IS&T Electronic Imaging
    • Int'l Joint Research
  • [Presentation] 構造方程式モデリングを用いた質感知覚モデルの構築2022

    • Author(s)
      渡辺修平,堀内隆彦
    • Organizer
      電子情報通信学会総合大会
  • [Presentation] レーザープロジェクタによる透明物体の表面形状と屈折率の同時計測2022

    • Author(s)
      八木大地,平井経太,堀内隆彦
    • Organizer
      日本色彩学会視覚情報基礎研究会
  • [Presentation] Relationship between onomatopoeia and physical properties when pressing a soft object2022

    • Author(s)
      Miku Kaneda, Masahiro Takeuchi, Seitaro Kaneko, Hiroyuki Kajimoto
    • Organizer
      IEEE Haptics Symposium2022
    • Int'l Joint Research
  • [Presentation] 周辺視野を活用した情報検索効率化の検討2021

    • Author(s)
      松永 大河, Yung-Hao Yang, 三好 清文, 西田 眞也
    • Organizer
      日本視覚学会夏季大会
  • [Presentation] Vision Science for Display Technologies2021

    • Author(s)
      Shin'ya Nishida
    • Organizer
      International Display Workshops
    • Int'l Joint Research / Invited
  • [Presentation] 二色性反射モデルに基づく光沢編集2021

    • Author(s)
      真鍋裕亮,田中緑,堀内隆彦
    • Organizer
      日本色彩学会研究会大会
  • [Presentation] 超解像のための3D点群の位置合わせ精度の改善2021

    • Author(s)
      明先奎亮,田中緑,堀内隆彦
    • Organizer
      日本色彩学会測色研究会
  • [Presentation] Response of the Orbitofrontal Area to Harmony between Color and Fragrance in a Lighting Environment2021

    • Author(s)
      Gaku Yamashita, Midori Tanaka, Takahiko Horiuchi
    • Organizer
      The 6th Asia Color Association Conference
    • Int'l Joint Research
  • [Presentation] Modelling of Perceptual Gloss by Physical Measurement of Flat Surface2021

    • Author(s)
      Shoma Amari, Midori Tanaka, Takahiko Horiuchi
    • Organizer
      CIE Midterm Meeting
    • Int'l Joint Research
  • [Presentation] Colour Perception of LED Point Light Sources in Scotopic Vision2021

    • Author(s)
      Riho Ogawa, Midori Tanaka, Takahiko Horiuchi
    • Organizer
      CIE Midterm Meeting
    • Int'l Joint Research
  • [Presentation] Estimation of authenticity model considering the color: Leather as a case study2021

    • Author(s)
      Shuhei Watanabe, Takahiko Horiuchi
    • Organizer
      AIC Congress
    • Int'l Joint Research
  • [Presentation] Effect of ipRGC on Colour Perception of Display Device under Various Illuminants2021

    • Author(s)
      Kota Akiba, Midori Tanaka, Takahiko Horiuchi
    • Organizer
      AIC Congress
    • Int'l Joint Research
  • [Presentation] Consideration of Factors Affecting Gloss Perception Using Independent Scenes to Each Eye2021

    • Author(s)
      Keisuke Myosen, Midori Tanaka, Takahiko Horiuchi
    • Organizer
      European Conference on Visual Perception
    • Int'l Joint Research
  • [Presentation] 評価方法の違いによる物体の光沢感スコアに関する実験的考察2021

    • Author(s)
      平岡理香,田中緑,堀内隆彦
    • Organizer
      日本色彩学会研究会大会
  • [Presentation] 皮革の色が質感知覚に与える影響の考察2021

    • Author(s)
      渡辺修平,堀内隆彦
    • Organizer
      日本色彩学会視覚情報基礎研究会
  • [Presentation] 種々の材質の物体に対応した画像光沢の編集方法2021

    • Author(s)
      真鍋裕亮,田中緑,堀内隆彦
    • Organizer
      日本色彩学会第52回全国大会
  • [Presentation] Thermal Sensation on Forehead Using Electrical Stimulation2021

    • Author(s)
      Taiga Saito, Jianyao Zhang, Takayuki Kameoka, Hiroyuki Kajimoto
    • Organizer
      Conference on Human Factors in Computing Systems
    • Int'l Joint Research
  • [Presentation] Presentation of a Feeling of Presence Using an Electrostatic Field2021

    • Author(s)
      Mikiko Karasawa, Hiroyuki Kajimoto
    • Organizer
      Conference on Human Factors in Computing Systems
    • Int'l Joint Research
  • [Presentation] Thermal Sensation Presentation to the Forehead Using Electrical Stimulation: Comparison with Other Tactile Modalities2021

    • Author(s)
      Taiga Saito, Jianyao Zhang, Takayuki Kameoka, Hiroyuki Kajimoto
    • Organizer
      IEEE World Haptics Conference 2021
    • Int'l Joint Research
  • [Presentation] Measurement of Horizontal Local Skin Strain on Grooved Texture2021

    • Author(s)
      Seitaro Kaneko, Hiroyuki Kajimoto
    • Organizer
      IEEE World Haptics Conference 2021
    • Int'l Joint Research
  • [Presentation] Modulation of Curvature of Soft Ball by Facing Motion2021

    • Author(s)
      Masahiro Takeuchi, Seitaro Kaneko, Hiroyuki Kajimoto
    • Organizer
      IEEE World Haptics Conference 2021
    • Int'l Joint Research
  • [Presentation] Chemical induced Thermal Grill Illusion2021

    • Author(s)
      Takumi Hamazaki, Miku Kaneda, Zhang Jianyao, Seitaro Kaneko, Hiroyuki Kajimoto
    • Organizer
      IEEE Haptics Symposium2022
    • Int'l Joint Research
  • [Presentation] 指先の左右における皮膚変形の差異に関する予備的検討2021

    • Author(s)
      張建堯, 梶本裕之
    • Organizer
      日本機械学会ロボティクス・メカトロニクス講演会
  • [Presentation] 額電気刺激による温度感覚提示における複数点刺激の効果の検討2021

    • Author(s)
      齋藤大雅,張建堯,亀岡嵩幸,梶本裕之
    • Organizer
      第26回 日本バーチャルリアリティ学会大会
  • [Presentation] 皮膚電気刺激と力覚の融合による硬軟感の高品位化の検討2021

    • Author(s)
      須賀悠偉,竹内将大,田中叡,梶本裕之
    • Organizer
      第26回 日本バーチャルリアリティ学会大会
  • [Presentation] 柔軟物体から想起されるオノマトペと物性の関連性の予備的検討2021

    • Author(s)
      金田実久,竹内将大,金子征太郎, 梶本裕之
    • Organizer
      第26回 日本バーチャルリアリティ学会大会
  • [Presentation] 一次元凹凸面なぞり時の時空間皮膚ひずみの計測2021

    • Author(s)
      金子征太郎, 梶本裕之
    • Organizer
      第26回 日本バーチャルリアリティ学会大会
  • [Presentation] 偏加速度振動による力覚生起時の皮膚計測2021

    • Author(s)
      金子征太郎, 中村拓人,梶本裕之
    • Organizer
      第26回 日本バーチャルリアリティ学会大会
  • [Presentation] スライムにピンアレイを刺突することによる表面凹凸の変化が平滑感知覚に与える影響2021

    • Author(s)
      高見太基,齋藤大雅,亀岡嵩幸,梶本裕之
    • Organizer
      第26回 日本バーチャルリアリティ学会大会
  • [Presentation] 化学物質を用いたサーマルグリル錯覚2021

    • Author(s)
      浜崎拓海,金田実久,張建堯,金子征太郎,梶本裕之
    • Organizer
      第26回 日本バーチャルリアリティ学会大会
  • [Presentation] スライムへのピンアレイ刺突による触感変調の計測2021

    • Author(s)
      高見太基,齋藤大雅,張建堯,亀岡嵩幸,梶本裕之
    • Organizer
      第22回計測自動制御学会システムインテグレーション部門講演会
  • [Presentation] ニューラルネットワークとヒトにおける時間変調伝達関数の比較2021

    • Author(s)
      上村 卓也, 寺島 裕貴, 古川 茂人
    • Organizer
      日本音響学会聴覚研究会
  • [Presentation] 教師あり学習を用いた聴覚系のモデリング2021

    • Author(s)
      上村 卓也
    • Organizer
      音響学会サマーセミナー
    • Invited
  • [Presentation] Psychophysical detection sensitivity in a neural network trained for sound classification2021

    • Author(s)
      上村 卓也, 寺島 裕貴, 古川 茂人
    • Organizer
      日本神経回路学会
  • [Book] ヒトの感性に寄り添った製品開発とその計測,評価技術(5章4節)2021

    • Author(s)
      坂本真樹、田原紫
    • Total Pages
      -
    • Publisher
      技術情報協会
  • [Book] 人工知能を用いた 五感・認知機能の可視化と メカニズム解明(4章1節)2021

    • Author(s)
      坂本真樹、野崎裕二
    • Total Pages
      533
    • Publisher
      技術情報協会

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi