• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

A study on multi-participant entertainment framework based on various mixed reality displays

Research Project

Project/Area Number 16K00288
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Research Field Human interface and interaction
Research InstitutionRitsumeikan University

Principal Investigator

Ohshima Toshikazu  立命館大学, 映像学部, 教授 (40434708)

Project Period (FY) 2016-04-01 – 2019-03-31
Project Status Completed (Fiscal Year 2018)
Budget Amount *help
¥4,420,000 (Direct Cost: ¥3,400,000、Indirect Cost: ¥1,020,000)
Fiscal Year 2018: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2017: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2016: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
KeywordsEdTech / 教育応用 / プログラミング教育 / バーチャル教材 / 生態系シミュレーション / 医療・教育 / デジタル教材 / 小学校での運用実験 / 国際学会での展示発表 / 力覚提示と空中像再現併用 / 人工生命行動シミュレーション / 国際学会発表 / デモ展示実験 / バーチャル生態系シミュレーション / 教育用アプリケーション / バーチャルリアリティ / ミクストリアリティ / マルチモーダルインタフェース / ユーザインタフェース
Outline of Final Research Achievements

Purpose of this study is to develop new technical platform for creation of mixed reality (MR) entertainment and educational tools with wide range of display styles of MR; the first one is a head-mounted display, which enables first-person view. The second is a projection-based scheme, which makes a physical environment into MR space. And the third is a physical MR display, which replaces physical counterparts in the real environment with MR devices. In addition to that, multimodal, natural and physical user interfaces augment the experience through the MR devices. Developed systems shown promised possibility to be deployed into not only entertainment but also educational area. Especially an educational system of ecosystem simulation replaces physical instruments with digital devices while keeping reality of experiments in a laboratory. On the other hand, a programming learning tool with a tangible interface bridges the gap between physical experience and creation of program logic.

Academic Significance and Societal Importance of the Research Achievements

教育応用も含む広い意味でのエンタテインメントに複合現実感(MR)技術を適用し、多様な形式のMRディスプレイと実世界指向インタフェースを導入することによって、体験や表現に応じた形式の現実環境とバーチャル環境との融合体験を実装する枠組みを構築した。デジタルな対象をフィジカルな空間に具現化し、あるいは逆にフィジカルな対象をデジタル化するという、デジタルとフィジカルとの間の往還により、新たなMR型教材への展開の可能性を示した。生態系学習シミュレータ、多感覚的なMR模型教材、書籍形式のMR型教材、実世界指向プログラミング学習システムなど、各形式の特長を活かした応用の原型を示すことができた。

Report

(4 results)
  • 2018 Annual Research Report   Final Research Report ( PDF )
  • 2017 Research-status Report
  • 2016 Research-status Report
  • Research Products

    (28 results)

All 2019 2018 2017 2016

All Journal Article (13 results) (of which Int'l Joint Research: 4 results,  Peer Reviewed: 6 results,  Open Access: 2 results,  Acknowledgement Compliant: 3 results) Presentation (15 results) (of which Int'l Joint Research: 6 results,  Invited: 2 results)

  • [Journal Article] HaptoBOX: 複合現実体験を増強する多感覚型インタフェースの研究 (1)デバイスの試作2019

    • Author(s)
      木川貴一郎, 大島登志一
    • Journal Title

      情報処理学会インタラクション2019論文集

      Volume: - Pages: 846-849

    • Related Report
      2018 Annual Research Report
  • [Journal Article] MR Book: ミクストリアリティによるインタラクティブ図鑑の制作 (1)ユーザインタフェースの検討2019

    • Author(s)
      山内稀恵, 大島登志一
    • Journal Title

      情報処理学会インタラクション2019論文集

      Volume: - Pages: 290-293

    • Related Report
      2018 Annual Research Report
  • [Journal Article] Tactile Microcosm of ALife: Interaction with Artificial Life by Aerial Mixed Reality Display2018

    • Author(s)
      Ohshima Toshikazu、Sumizono Tsukasa
    • Journal Title

      Proceedings of SIGGRAPH Asia 2018

      Volume: - Pages: 1-2

    • DOI

      10.1145/3283289.3283357

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed
  • [Journal Article] MitsuDomoe: バーチャル生態系の捕食連鎖 シミュレーション体験システム(第3報)群集行動の拡張と空中像との力覚インタラクション2018

    • Author(s)
      角園司, 大島登志一
    • Journal Title

      エンタテインメントコンピューティングシンポジウム2018論文集

      Volume: 2018 Pages: 195-199

    • NAID

      170000178289

    • Related Report
      2018 Annual Research Report
    • Open Access
  • [Journal Article] Tactile MicRocosm of ALife: Haptic Interaction with Artificial Life by Aerial Mixed Reality Display2018

    • Author(s)
      Toshikazu Ohshima
    • Journal Title

      Proceedings of the Virtual Reality International Conference 2018 - Laval Virtual

      Volume: - Pages: 1-4

    • DOI

      10.1145/3234253.3234320

    • Related Report
      2018 Annual Research Report
    • Peer Reviewed
  • [Journal Article] MR Code Weaver: 投影型ミクストリアリティによるタンジブルなプログラミング学習ツール2018

    • Author(s)
      坂本恋, 大島登志一
    • Journal Title

      第22回情報処理学会シンポジウムインタラクション2018論文集

      Volume: - Pages: 895-899

    • Related Report
      2017 Research-status Report
  • [Journal Article] MitsuDomoe: Ecosystem simulator of virtual creatures in mixed reality petri dish (2)2017

    • Author(s)
      Toshikazu Ohshima, Kenzo Kojima
    • Journal Title

      Proceedings of SIGGRAPH '17: ACM SIGGRAPH 2017 Posters

      Volume: - Pages: 1-2

    • DOI

      10.1145/3102163.3102198

    • Related Report
      2017 Research-status Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] MitsuDomoe: バーチャル生態系の捕食連鎖シミュレーション体験システム(第2報)2017

    • Author(s)
      坂本恋, 和田勇気, 大島登志一
    • Journal Title

      情報処理学会エンタテインメントコンピューティングシンポジウム2017論文集

      Volume: - Pages: 435-438

    • NAID

      170000175994

    • Related Report
      2017 Research-status Report
  • [Journal Article] Mitsudomoe: Ecosystem simulator of virtual creatures in mixed reality petri dish2017

    • Author(s)
      Toshikazu Ohshima, Kenzo Kojima
    • Journal Title

      Proceedings of SA '17: SIGGRAPH Asia 2017 Posters

      Volume: - Pages: 1-2

    • DOI

      10.1145/3145690.3145742

    • Related Report
      2017 Research-status Report
    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] MitsuDomoe: Ecosystem Simulation of Virtual Creatures in Petri Dish2017

    • Author(s)
      Toshikazu Ohshima and Kenzo Kojima
    • Journal Title

      Proceedings of VRIC 2017; the 19th ACM Virtual Reality International Conference

      Volume: -

    • Related Report
      2016 Research-status Report
    • Peer Reviewed / Int'l Joint Research / Acknowledgement Compliant
  • [Journal Article] MitsuDomoe: Ecosystem Simulation of Virtual Creatures in Mixed Reality Petri Dish2017

    • Author(s)
      Toshikazu Ohshima and Kenzo Kojima
    • Journal Title

      Proceedings of Laval Virtual ReVolution 2017, "TransHumanism++" , open access journal, published by EPiC Series in Computing

      Volume: -

    • Related Report
      2016 Research-status Report
    • Peer Reviewed / Open Access / Int'l Joint Research / Acknowledgement Compliant
  • [Journal Article] MitsuDomoe: MitsuDomoe: バーチャル生態系の捕食連鎖シミュレーション体験システム(第1報)2017

    • Author(s)
      小島健三,大島登志一
    • Journal Title

      第21回情報処理学会シンポジウムインタラクション2017論文集

      Volume: - Pages: 872-875

    • Related Report
      2016 Research-status Report
  • [Journal Article] Virtual ISU: 座位姿勢での擬似歩行運動による歩行感覚提示インタフェース(第3報)2016

    • Author(s)
      大島 登志一 , 枝元 蛍 , 舘脇 望 , 柴田 龍輝
    • Journal Title

      エンタテインメントコンピューティングシンポジウム2016論文集

      Volume: - Pages: 295-300

    • NAID

      170000173531

    • Related Report
      2016 Research-status Report
    • Acknowledgement Compliant
  • [Presentation] HaptoBOX: 複合現実体験を増強する多感覚型インタフェースの研究 (1)デバイスの試作2019

    • Author(s)
      木川貴一郎, 大島登志一
    • Organizer
      情報処理学会インタラクション2019, インタラクティブ発表
    • Related Report
      2018 Annual Research Report
  • [Presentation] MR Book: ミクストリアリティによるインタラクティブ図鑑の制作 (1)ユーザインタフェースの検討2019

    • Author(s)
      山内稀恵, 大島登志一
    • Organizer
      情報処理学会インタラクション2019, インタラクティブ発表
    • Related Report
      2018 Annual Research Report
  • [Presentation] HaptoBOX: Multi-sensory Interface for Physical Mixed Reality Experience2019

    • Author(s)
      Kiichiro Kigawa, Toshikazu Ohshima
    • Organizer
      Laval Virtual ReVolution
    • Related Report
      2018 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Code Weaver: Programming Learning Tool with Tangible User Interface2019

    • Author(s)
      Ren Sakamoto, Toshikazu Ohshima
    • Organizer
      Laval Virtual ReVolution
    • Related Report
      2018 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 集中治療における複合現実感技術の可能性2019

    • Author(s)
      大島登志一
    • Organizer
      第46回日本集中治療医学会学術集会
    • Related Report
      2018 Annual Research Report
    • Invited
  • [Presentation] MitsuDomoe: バーチャル生態系の捕食連鎖シミュレーション体験システム(第3報)群集行動の拡張と空中像との力覚インタラクション2018

    • Author(s)
      角園司, 大島登志一
    • Organizer
      エンタテインメントコンピューティングシンポジウム2018
    • Related Report
      2018 Annual Research Report
  • [Presentation] ミクストリアティ/バーチャルリアリティの臨床医学応用の可能性を探る2018

    • Author(s)
      大島登志一
    • Organizer
      日本麻酔科学会第65回学術集会
    • Related Report
      2018 Annual Research Report
    • Invited
  • [Presentation] MR Code Weaver: 投影型ミクストリアリティによるタンジブルなプログラミング学習ツール2018

    • Author(s)
      坂本恋, 大島登志一
    • Organizer
      第22回情報処理学会シンポジウムインタラクション2018
    • Related Report
      2017 Research-status Report
  • [Presentation] MitsuDomoe: Ecosystem Simulation of Virtual Creatures in Petri Dish2017

    • Author(s)
      Toshikazu Ohshima and Kenzo Kojima
    • Organizer
      Laval Virtual ReVolution 2017
    • Place of Presentation
      Laval, France
    • Year and Date
      2017-03-22
    • Related Report
      2016 Research-status Report
    • Int'l Joint Research
  • [Presentation] MitsuDomoe: Ecosystem simulator of virtual creatures in mixed reality petri dish (2)2017

    • Author(s)
      Toshikazu Ohshima, Kenzo Kojima
    • Organizer
      ACM SIGGRAPH '17
    • Related Report
      2017 Research-status Report
    • Int'l Joint Research
  • [Presentation] MitsuDomoe: バーチャル生態系の捕食連鎖シミュレーション体験システム(第2報)2017

    • Author(s)
      坂本恋, 和田勇気, 大島登志一
    • Organizer
      情報処理学会エンタテインメントコンピューティングシンポジウム2017論文集
    • Related Report
      2017 Research-status Report
  • [Presentation] Mitsudomoe: Ecosystem simulator of virtual creatures in mixed reality petri dish2017

    • Author(s)
      Toshikazu Ohshima, Kenzo Kojima
    • Organizer
      ACM SIGGRAPH ASIA '17
    • Related Report
      2017 Research-status Report
    • Int'l Joint Research
  • [Presentation] MitsuDomoe: バーチャル生態系の捕食連鎖シミュレーション体験システム(第1報)2017

    • Author(s)
      小島健三,大島登志一
    • Organizer
      第21回情報処理学会シンポジウム インタラクション2017
    • Place of Presentation
      明治大学(東京都・中野区)
    • Related Report
      2016 Research-status Report
  • [Presentation] MitsuDomoe: Ecosystem Simulation of Virtual Creatures in Petri Dish2017

    • Author(s)
      Toshikazu Ohshima and Kenzo Kojima
    • Organizer
      VRIC 2017; the 19th ACM Virtual Reality International Conference
    • Place of Presentation
      Laval, France
    • Related Report
      2016 Research-status Report
    • Int'l Joint Research
  • [Presentation] Virtual ISU: 座位姿勢での擬似歩行運動による歩行感覚提示インタフェース(第3報)2016

    • Author(s)
      大島 登志一, 枝元 蛍, 舘脇 望, 柴田 龍輝
    • Organizer
      情報処理学会 エンタテインメントコンピューティング2016
    • Place of Presentation
      グランフロント大阪(大阪府・大阪市)
    • Related Report
      2016 Research-status Report

URL: 

Published: 2016-04-21   Modified: 2020-03-30  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi