触感の記録と合成に基づく身体性インタラクション設計基盤技術の構築

• 研究課題/領域番号: 26700018
• 研究種目: 若手研究(A)
• 配分区分: 一部基金
• 研究分野: ヒューマンインタフェース・インタラクション
• 研究機関: 慶應義塾大学
• 研究代表者: 南澤 孝太 慶應義塾大学, メディアデザイン研究科(日吉), 准教授 (10585623)
• 研究期間 (年度): 2014-04-01 – 2018-03-31
• 研究課題ステータス: 完了 (2017年度)
• 配分額: 24,050千円 (直接経費: 18,500千円、間接経費: 5,550千円); 2017年度: 6,110千円 (直接経費: 4,700千円、間接経費: 1,410千円); 2016年度: 6,110千円 (直接経費: 4,700千円、間接経費: 1,410千円); 2015年度: 5,590千円 (直接経費: 4,300千円、間接経費: 1,290千円); 2014年度: 6,240千円 (直接経費: 4,800千円、間接経費: 1,440千円)
• キーワード: ハプティクス / 触覚 / クロスモダリティ / 身体性 / ヒューマンコンピュータインタラクション / バーチャルリアリティ / 身体情報学 / マルチモーダルインタフェース / ヒューマンコンピューターインタラクション / 身体性インタラクション / 身体性メディア

研究成果の概要

本研究では触覚を用いた身体的なインタラクションを実現するため，触感の記録・伝送・拡張とユーザの身体運動に応じたリアルタイム合成手法の研究開発を行った．視覚や聴覚とのクロスモダリティ効果による触感の時空間性の拡張について検証し，人の触知覚を拡張できる可能性を示した．また本研究の知見の社会実装に繋げるため，産学連携による実証システムの構築と実証試験を行い，福祉・知育等の分野での有用性を示した．

研究成果

• [雑誌論文] atmoSphere: designing cross-modal music experiences using spatial audio with haptic feedback (2017)
  • 著者名/発表者名: Fushimi Haruna、Kato Daiya、Kamiyama Youichi、Yanagihara Kazuya、Minamizawa Kouta、Kunze Kai
  • 雑誌名: Proceedings of ACM SIGGRAPH 2017 Emerging Technologies 巻: Article.No.4
  • DOI: 10.1145/3084822.3084845
  • 査読あり / オープンアクセスとしている
• [雑誌論文] Walk-In Music: Walking Experience with Synchronized Music and Its Effect of Pseudo-gravity (2017)
  • 著者名/発表者名: Murata Haruto、Bouzarte Youssef、Kanebako Junichi、Minamizawa Kouta
  • 雑誌名: Adjunct Publication of the 30th Annual ACM Symposium on User Interface Software and Technology 巻: - ページ: 177-179
  • DOI: 10.1145/3131785.3131822
  • 査読あり / オープンアクセスとしている
• [雑誌論文] Dramagic: 机上遊びを拡張するサウンドアニメーションのデザイン (2016)
  • 著者名/発表者名: 山本澪，花光宣尚，金稀淳，南澤孝太，稲見昌彦
  • 雑誌名: 日本バーチャルリアリティ学会論文誌 巻: 21 号: 3 ページ: 473-482
  • DOI: 10.18974/tvrsj.21.3_473
  • NAID: 130005268388
  • 査読あり / オープンアクセスとしている / 謝辞記載あり
• [雑誌論文] からだタップ：からだで感じるタップダンス (2016)
  • 著者名/発表者名: 柴﨑美奈，神山洋一，南澤孝太
  • 雑誌名: 日本バーチャルリアリティ学会論文誌 巻: 21 号: 3 ページ: 537-540
  • DOI: 10.18974/tvrsj.21.3_537
  • NAID: 130005268339
  • 査読あり / オープンアクセスとしている / 謝辞記載あり
• [雑誌論文] VRシアターにおけるパーソナルな鑑賞体験を支援する多人数ポインティング (2015)
  • 著者名/発表者名: 柴崎美奈, Yeuneu Chang, 武田港, 小幡光一, 吉野弘一, 遠藤志津子, 徳久悟, 南澤孝太
  • 雑誌名: 日本バーチャルリアリティ学会論文誌 巻: 20 ページ: 333-344
  • 査読あり / オープンアクセスとしている
• [雑誌論文] A(touch)ment: a smartphone extension for instantly sharing visual and tactile experience (2015)
  • 著者名/発表者名: Haruki Nakamura, Nobuhisa Hanamitsu, Kouta Minamizawa
  • 雑誌名: Proceedings of the 6th Augmented Human International Conference 巻: 6 ページ: 223-224
  • DOI: 10.1145/2735711.2735782
  • 査読あり / 謝辞記載あり
• [学会発表] Tangible Pads (2018)
  • 著者名/発表者名: Youssef Bouszarte,Junichi Kanebako,Kazuya Yanagihara,Kouta Minamizawa
  • 学会等名: SXSW EDU2018
  • 国際共著/国際学会である
• [学会発表] TECHTILE Bits: Designing a Tool for Children to Create Haptic Devices (2017)
  • 著者名/発表者名: Mina Shibasaki, Keitaro Tsuchiya, Kouta Minamizawa
  • 学会等名: 2017 Virtual Reality International Conference
  • 発表場所: Laval, France
  • 年月日: 2017-03-22
  • 国際共著/国際学会である
• [学会発表] HapticAid: Haptic Experiences System Using Mobile Platform (2017)
  • 著者名/発表者名: Tomosuke Maeda, Keitaro Tsuchiya, Roshan Peiris, Yoshihiro Tanaka, Kouta Minamizawa
  • 学会等名: ACM TEI 2017
  • 発表場所: 慶應義塾大学（神奈川県横浜市）
  • 年月日: 2017-03-20
  • 国際共著/国際学会である
• [学会発表] atmoSphere: designing cross-modal music experiences using spatial audio with haptic feedback (2017)
  • 著者名/発表者名: Fushimi Haruna、Kato Daiya、Kamiyama Youichi、Yanagihara Kazuya、Minamizawa Kouta、Kunze Kai
  • 学会等名: SIGGRAPH '17 ACM SIGGRAPH 2017 Emerging Technologies
  • 国際共著/国際学会である
• [学会発表] 空間音響と触覚の相乗効果による空間認知の拡張 (2017)
  • 著者名/発表者名: 柳原 一也、伏見 はるな、神山 洋一、カイ クンツェ、南澤 孝太
  • 学会等名: 第22回日本バーチャルリアリティ学会大会
• [学会発表] 食材を用いた触覚刺激による咀嚼感呈示デバイスの提案 (2017)
  • 著者名/発表者名: 眞保 ありあ、金箱 淳一、南澤 孝太
  • 学会等名: 第22回日本バーチャルリアリティ学会大会
• [学会発表] 子どもにおける身体性を活用した学びのための触感フィードバックシステムの提案 (2017)
  • 著者名/発表者名: 柴﨑 美奈、南澤 孝太
  • 学会等名: 第22回日本バーチャルリアリティ学会大会
• [学会発表] Walk-In Music: Walking Experience with Synchronized Music and Its Effect of Pseudo-gravity (2017)
  • 著者名/発表者名: Murata Haruto、Bouzarte Youssef、Kanebako Junichi、Minamizawa Kouta
  • 学会等名: UIST '17 Adjunct Publication of the 30th Annual ACM Symposium on User Interface Software and Technology
  • 国際共著/国際学会である
• [学会発表] Karada tap (2017)
  • 著者名/発表者名: Mina Shibasaki, Kouta Minamizawa
  • 学会等名: 14th Dubai International Film Festival
  • 国際共著/国際学会である / 招待講演
• [学会発表] Tangible Pads (2017)
  • 著者名/発表者名: Youssef Bouszarte,Junichi Kanebako,Kazuya Yanagihara,Kouta Minamizawa
  • 学会等名: 14th Dubai International Film Festival
  • 国際共著/国際学会である / 招待講演
• [学会発表] Karada tap (2017)
  • 著者名/発表者名: 柴﨑 美奈、南澤 孝太、
  • 学会等名: TEPIA先端技術館における常設展示
  • 招待講演
• [学会発表] HapticAid: Wearable Haptic Augmentation System for Enhanced, Enchanted and Empathised Haptic Experiences (2016)
  • 著者名/発表者名: Tomosuke Maeda, Roshan Peiris, Masashi Nakatani, Yoshihiro Tanaka, Kouta Minamizawa
  • 学会等名: SIGGRAPH Asia 2016 Emerging Technologies
  • 発表場所: マカオ、中国
  • 年月日: 2016-12-05
  • 国際共著/国際学会である
• [学会発表] Designing a Haptic Feedback System for Hearing-Impaired to Experience Tap Dance (2016)
  • 著者名/発表者名: Mina Shibasaki, Youichi Kamiyama, Kouta Minamizawa
  • 学会等名: ACM UIST 2016
  • 発表場所: 一橋ホール（東京都千代田区）
  • 年月日: 2016-10-16
  • 国際共著/国際学会である
• [学会発表] 触感覚を拡張する補触器HapticAidの基礎検討 (2016)
  • 著者名/発表者名: 前田智祐, 土屋慧太郎, Roshan Peiris, 田中由浩, 南澤孝太
  • 学会等名: 第21回日本バーチャルリアリティ学会大会
  • 発表場所: つくば国際会議場（茨城県つくば市）
  • 年月日: 2016-09-14
• [学会発表] HapticAid: Wearable Haptic Augmentation System based on Skin Vibration sensing (2016)
  • 著者名/発表者名: Tomosuke Maeda, Roshan Peiris, Masashi Nakatani, Yoshihiro Tanaka, Kouta Minamizawa
  • 学会等名: EuroHaptics 2016
  • 発表場所: London, UK
  • 年月日: 2016-07-04
  • 国際共著/国際学会である
• [学会発表] Dramagic: Sound Animation Design for Enchanted Things (2016)
  • 著者名/発表者名: Mio Yamamoto, Nobuhisa Hanamitsu, Heesoon Kim, Kouta Minamizawa, Masahiko Inami
  • 学会等名: Virtual Reality International Conference 2016
  • 発表場所: Laval, France
  • 年月日: 2016-03-23
  • 国際共著/国際学会である
• [学会発表] Wearable Haptic Augmentation System Using Skin Vibration Sensor (2016)
  • 著者名/発表者名: Tomosuke Maeda, Roshan Peiris, Masashi Nakatani, Yoshihiro Tanaka, Kouta Minamizawa
  • 学会等名: Virtual Reality International Conference 2016
  • 発表場所: Laval, France
  • 年月日: 2016-03-23
  • 国際共著/国際学会である
• [学会発表] DRAMAGIC (2016)
  • 著者名/発表者名: Mio Yamamoto, Nobuhisa Hanamitsu, Heesoon Kim, Kouta Minamizawa, Masahiko Inami
  • 学会等名: Laval Virtual 2016 Revolutions
  • 発表場所: Laval, France
  • 年月日: 2016-03-23
  • 国際共著/国際学会である
• [学会発表] 皮膚振動センサを用いたウェアラブル触感拡張システムの基礎検討 (2015)
  • 著者名/発表者名: 前田 智祐, 仲谷 正史, Roshan, Peiris, 田中 由浩, 南澤 孝太
  • 学会等名: 第16回計測自動制御学会システムインテグレーション部門講演会
  • 発表場所: 名古屋国際会議場（愛知県名古屋市）
  • 年月日: 2015-12-14
• [学会発表] Designing haptic media technologies for embodied creation (2015)
  • 著者名/発表者名: Kouta Minamizawa
  • 学会等名: ACM SIGGRAPH Asia 2015 Workshop on Haptic Media And Contents Design
  • 発表場所: 神戸コンベンションター（兵庫県神戸市）
  • 年月日: 2015-11-02
  • 国際共著/国際学会である / 招待講演
• [学会発表] Twech: a mobile platform to search and share visuo-tactile experiences (2015)
  • 著者名/発表者名: Nobuhisa Hanamitsu, Haruki Nakamura, Masashi Nakatani, Kouta Minamizawa
  • 学会等名: SIGGRAPH Asia 2015 Emerging Technologies
  • 発表場所: 神戸コンベンションター（兵庫県神戸市）
  • 年月日: 2015-11-02
  • 国際共著/国際学会である
• [学会発表] Pseudo-Embodiment：振動情報に基づく映像の自己帰属感の拡張手法の提案 (2015)
  • 著者名/発表者名: 花光 宣尚, 仲谷 正史, 南澤 孝太
  • 学会等名: 日本バーチャルリアリティ学会 第20回大会
  • 発表場所: 芝浦工業大学（東京都江東区）
  • 年月日: 2015-09-09
• [学会発表] 触感ペイントシステムの提案 (2015)
  • 著者名/発表者名: 田中 博和, 花光 宣尚, 南澤 孝太, 仲谷 正史, 舘 暲
  • 学会等名: 日本バーチャルリアリティ学会 第20回大会
  • 発表場所: 芝浦工業大学（東京都江東区）
  • 年月日: 2015-09-09
• [学会発表] Twech: a mobile platform to search and share visuo-tactile experiences (2015)
  • 著者名/発表者名: Nobuhisa Hanamitsu, Kanata Nakamura, Mhd Yamen Saraiji, Kouta Minamizawa, Susumu Tachi
  • 学会等名: ACM SIGGRAPH 2015 Posters
  • 発表場所: Los Angels, CA, USA
  • 年月日: 2015-08-09
  • 国際共著/国際学会である
• [学会発表] Tangment (2015)
  • 著者名/発表者名: Hirokazu Tanaka, Nobuhisa Hanamitsu, Kouta Minamizawa, Susumu Tachi
  • 学会等名: IEEE Worldhaptics 2015
  • 発表場所: Chicago, IL, USA
  • 年月日: 2015-06-22
  • 国際共著/国際学会である
• [学会発表] 描き心地に関わる振動覚の検証と再現の検討 (2015)
  • 著者名/発表者名: 田中博和
  • 学会等名: ロボティクス・メカトロニクス講演会2015
  • 発表場所: 京都市勧業館「みやこめっせ」（京都市）
  • 年月日: 2015-05-17 – 2015-05-19
• [学会発表] 描き心地に関わる振動覚の検証と再現の検討 (2015)
  • 著者名/発表者名: 田中博和, 花光宣尚, 南澤孝太, 舘暲
  • 学会等名: ロボティクス・メカトロニクス講演会2015
  • 発表場所: 京都市勧業館みやこめっせ（京都府京都市）
  • 年月日: 2015-05-17
• [学会発表] A(touch)ment: a smartphone extension for instantly sharing visual and tactile experience (2015)
  • 著者名/発表者名: Haruki Nakamura
  • 学会等名: the 6th Augmented Human International Conference
  • 発表場所: Sands Expo and Convention Centre (Singapore)
  • 年月日: 2015-03-09 – 2015-03-11
• [学会発表] Convolutional Neural Networkを用いた触感検索システム (2014)
  • 著者名/発表者名: Nobuhisa Hanamitsu
  • 学会等名: 第19回日本バーチャルリアリティ学会大会論文集
  • 発表場所: 名古屋大学（名古屋）
  • 年月日: 2014-09-17 – 2014-09-19
• [図書] Pervasive Haptics “TECHTILE Workshop for Creating Haptic Content” (2016)
  • 著者名/発表者名: Masashi Nakatani, Yasuaki Kakehi, Soichiro Mihara, Kouta Minamizawa, Susumu Tachi
  • 総ページ数: 306
  • 出版者: Springer
• [備考] KMD Embodied Media Project
  • URL: http://embodiedmedia.org
• [備考] HAPTIC DESIGN PROJECT
  • URL: http://hapticdesign.org
• [備考] KMD Embodied Media Project
  • URL: http://embodiedmedia.org/
• [産業財産権] 触覚呈示システム、触覚呈示方法、および、触覚呈示プログラム (2015)
  • 発明者名: 南澤, 田中, 前田, 仲谷, ベイリス
  • 権利者名: 慶應義塾
  • 産業財産権種類: 特許
  • 産業財産権番号: 2015-241953
  • 出願年月日: 2015-12-11