• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Development of a Distance Learning System for Prosthodontics that Combines Naked-Eye Stereoscopic Vision and Tactile Reproduction

Research Project

Project/Area Number 22K10065
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Review Section Basic Section 57050:Prosthodontics-related
Research InstitutionKanagawa Dental College

Principal Investigator

板宮 朋基  神奈川歯科大学, 歯学部, 教授 (60583896)

Co-Investigator(Kenkyū-buntansha) 木本 克彦  神奈川歯科大学, 歯学部, 教授 (70205011)
中野 亜希人  神奈川歯科大学, 歯学部, 講師 (80967662)
Project Period (FY) 2022-04-01 – 2025-03-31
Project Status Granted (Fiscal Year 2023)
Budget Amount *help
¥4,030,000 (Direct Cost: ¥3,100,000、Indirect Cost: ¥930,000)
Fiscal Year 2024: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2023: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2022: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Keywords歯科補綴学 / 裸眼立体視 / 触覚 / 歯科 / 支台歯形成 / バーチャル / 歯学教育 / 空間再現ディスプレイ / バーチャル実習 / 空間再現 / 遠隔実習 / 拡張現実
Outline of Research at the Start

バーチャルリアリティ(VR)や拡張現実(AR)を活用した医歯学教育の従来の取り組みではヘッドマウンティッドディスプレイ(HMD)やスマートグラスなどの装着が必須であり、衛生管理や長時間利用による眼の疲労などの課題がある。本研究では、デバイスの装着を一切必要とせず、手元の位置に配置した3D-CGモデルを裸眼で精確に立体視できる空間再現技術と、反力の再現が可能な触覚再現技術を併用した新たな歯科補綴学の遠隔実習手法を開発する。新型コロナウイルス感染症拡大下の状況で実習を従来通り実施することは当面困難な状況であるため、学生が自宅において実習室と同等以上の学修効果を得られる遠隔歯科補綴学実習を実現する。

Outline of Annual Research Achievements

バーチャルリアリティ(VR)や拡張現実(AR)を活用した医歯学教育の従来の取り組みでは、ヘッドマウンティッドディスプレイ(HMD)やスマートグラスなどの装着が必須であり、衛生管理や長時間利用による眼の疲労などの課題がある。現状のHMDやスマートグラスでは、表示した3D-CGモデルの立体感・奥行感を装着者が精確に把握するためには、装着者の瞳孔間距離の測定と設定が必要であり、実習での日常的な利用に課題が残る。本研究では、デバイスの装着を一切必要とせず、手元の位置に配置した3D-CGモデルを裸眼で精確に立体視できる空間再現技術と、反力の再現が可能な触覚再現技術を併用した新たな歯科補綴学の遠隔実習手法を開発する。本計画立案時は新型コロナウイルス感染症拡大下の状況で実習を従来通り実施することは当面困難な状況であったため、学生が自宅において実習室と同等以上の学修効果を得られる遠隔歯科補綴学実習を実現することを目的にした。現在は対面での実習が可能になったが、今後新たな感染症等拡大の状況を想定し、当初の計画通り進めている。
2年目である2023年度は以下の3点を実現することができた。1)実際の歯のCTデータから3DCGモデルを作成し、ボクセル化することによりリアルタイムな切削表現を実現できた。2)実際の手指の動作認識と反力の再現が可能な触覚再現デバイスを利用した歯の3DCGモデルのリアルタイム切削シミュレーターの試作を実現できた。3)支台歯形成実習に応用するため、利用者の切削量と模範切削量の差分を自動計算し採点するシステムを実現できた。また派生した成果として、2眼カメラで撮影したステレオ映像を裸眼立体視できるしくみも実現できた。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本研究は以下に4つのフェーズによる。1st Phase → 裸眼立体視と手指動作認識による支台歯形成シミュレーターの開発:3D-CGで表現した口腔内の歯と手指の動作に連動した3D-CG器具先端との接触判定を行うことで歯の切削が可能になる支台歯形成シミュレーターを開発する。手指の動作を遅延なく正確に取得し、実物のようなリアルな切削表現をバーチャル環境で実現する。
2nd Phase → 手指装着型小型触覚デバイスの開発と反力提示のための制御手法の確立:通電すると伸縮する次世代ゴム素材「e-Rubber」を触覚デバイスの基として用いる。1st Phaseで開発したシミュレーターの接触判定結果を反力提示に反映させるには、e-Rubberにどのような信号を送ると反力を感じられるようになるか試行錯誤を繰り返し、明らかにする。
3rd Phase → 複数台のシミュレーターのネット接続による遠隔歯科補綴学実習の実施:1st Phaseと2nd Phaseで実現したシミュレーターをインターネット経由で複数台接続し、裸眼立体表示と操作内容および触覚が遠隔地同士で共有できるか検証を行い、支台歯形成の遠隔実習を試験運用する。転送遅延など運用上の問題点を明らかにする。
4th Phase → 学生の操作内容をデータとして取得し自動採点を実現:1st Phaseと2nd Phaseで実現したシミュレーターに操作内容記録機能を加え、データとして出力できるようにする。教員が行った際の模範データとの差分を計算することにより実習手技の自動採点システムを実現し、本システムの実用性を明らかにする。
2023年度は、2022年度に実現できた2nd,3rd Phaseに加えて、1st,4th Phaseの機能を実装することができ、複数の歯科医師による実証実験を開始できた。そのため、おおむね順調に進展していると言える。

Strategy for Future Research Activity

今後は、各フェーズの機能を統合し、3D-CGモデルを裸眼で精確に立体視できる空間再現技術と反力の再現が可能な触覚再現技術を併用した新たな歯科補綴学の遠隔実習手法を実現する。現在は、実際の手指の動作認識と反力の再現は、ペン型の3D System Touchを用いているが、当初計画の「e-Rubber」を併用し、反力と振動の提示を同時に行えるしくみを実現する。複数の歯科医師と学生を対象にした実証実験と評価を行い、本システムの有用性を明らかにする。

Report

(2 results)
  • 2023 Research-status Report
  • 2022 Research-status Report
  • Research Products

    (23 results)

All 2024 2023 2022

All Journal Article (2 results) (of which Peer Reviewed: 2 results,  Open Access: 2 results) Presentation (21 results) (of which Int'l Joint Research: 2 results,  Invited: 5 results)

  • [Journal Article] Study of Root Canal Length Estimations by 3D Spatial Reproduction with Stereoscopic Vision2023

    • Author(s)
      Tsukuda Takato、Mutoh Noriko、Nakano Akito、Itamiya Tomoki、Tani-Ishii Nobuyuki
    • Journal Title

      Applied Sciences

      Volume: 13 Issue: 15 Pages: 8651-8651

    • DOI

      10.3390/app13158651

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Journal Article] The Use of a 3D Image Comparison Program for Dental Identification2023

    • Author(s)
      Kubo Daijiro、Itamiya Tomoki、Kawanishi Norishige、Hoshi Noriyuki、Kimoto Katsuhiko
    • Journal Title

      Applied Sciences

      Volume: 13 Issue: 13 Pages: 7517-7517

    • DOI

      10.3390/app13137517

    • Related Report
      2023 Research-status Report
    • Peer Reviewed / Open Access
  • [Presentation] 剖出過程の立体撮影とVRゴーグル・裸眼立体視ディスプレイによる閲覧システムの開発2024

    • Author(s)
      板宮朋基
    • Organizer
      第129回日本解剖学会総会・全国学術集会
    • Related Report
      2023 Research-status Report
  • [Presentation] 高精細裸眼立体視ディスプレイの歯科医学教育への応用~驚きのリアリティと教育効果~2023

    • Author(s)
      板宮朋基
    • Organizer
      日本デジタル歯科学会第14回学術大会
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] クロスリアリティー (XR)技術の歯科医学教育への応用と効果2023

    • Author(s)
      板宮朋基
    • Organizer
      日本口腔科学会第16回教育研修会
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] VR/ARから空間再現へ~高精細裸眼立体視ディスプレイが切り拓く3D可視化の新たなステージ2023

    • Author(s)
      板宮朋基
    • Organizer
      第3回日本臨床歯科CADCAM学会サマーフェスティバル
    • Related Report
      2023 Research-status Report
    • Invited
  • [Presentation] 画像比較プログラムにより算出された片側歯列断面画像の一致度を利用した歯科身元確認における同定法の検討2023

    • Author(s)
      久保大二郎, 板宮朋基, 川西範繁,星憲幸,木本克彦
    • Organizer
      日本デジタル歯科学会第14回学術大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 3D-CG立体表示歯科模型を用いた拡張現実における裸眼立体視システムの精確性の評価2023

    • Author(s)
      有輪政尊, 板宮朋基, 小泉創, 山口徹太郎
    • Organizer
      日本デジタル歯科学会第14回学術大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 裸眼立体視環境における歯牙モデルのリアルタイム切削・変形の実現2023

    • Author(s)
      富田凛太郎, 板宮朋基, 中野亜希人, 星憲幸, 服部慎太郎, 木本克彦
    • Organizer
      日本デジタル歯科学会第14回学術大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 裸眼立体視と三次元位置計測を用いたブラッシング指導支援システムの開発2023

    • Author(s)
      中野亜希人, 板宮朋基, 藤崎みのり, 鈴木美南子, 井上允, 川西範繁, 星憲幸, 木本克彦
    • Organizer
      日本デジタル歯科学会第14回学術大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 「まるで本物?!」眼の前にリアルな立体モデルが現れる~高精細裸眼立体視ディスプレイの歯科医学への応用2023

    • Author(s)
      板宮朋基
    • Organizer
      大阪歯科万博2023
    • Related Report
      2023 Research-status Report
  • [Presentation] 二眼カメラ立体映像を大型裸眼立体視ディスプレイで直ちに鑑賞できるシステムの開発2023

    • Author(s)
      板宮朋基, 中野亜希人, 高才東, 小松紀子, 沢井奈津子. 安部貴大
    • Organizer
      第28回日本バーチャルリアリティ学会大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 裸眼立体視とモーションセンサーを併用したブラッシング指導支援システムの開発2023

    • Author(s)
      中野亜希人, 板宮朋基, 藤崎みのり, 鈴木美南子, 井上允, 川西範繁, 星憲幸, 木本克彦
    • Organizer
      第28回日本バーチャルリアリティ学会大会
    • Related Report
      2023 Research-status Report
  • [Presentation] 裸眼立体視ディスプレイと二眼カメラを活用した基本手技実習支援システムの開発2023

    • Author(s)
      中野亜希人, 板宮朋基, 高才東, 小松紀子, 沢井奈津子. 安部貴大
    • Organizer
      第57回日本口腔科学会 関東地方部会
    • Related Report
      2023 Research-status Report
  • [Presentation] 実写立体映像を大型裸眼立体視ディスプレイで直ちに閲覧できるシステムの開発2023

    • Author(s)
      板宮朋基, 中野亜希人
    • Organizer
      第33回日本シミュレーション外科学会
    • Related Report
      2023 Research-status Report
  • [Presentation] A SPATIAL REALITY DISPLAY for Naked Eye Stereoscopic Visualization: An Innovative Approach For Dental Education2023

    • Author(s)
      Itamiya T
    • Organizer
      DIGITODONTICS WEBINAR SERIES 2023
    • Related Report
      2023 Research-status Report
    • Int'l Joint Research
  • [Presentation] A New Dental Education Method Using a Spatial Reality Display Capable of Stereoscopic Viewing with the Naked Eye without HMD2023

    • Author(s)
      Itamiya T
    • Organizer
      2nd International Workshop for Young Maxillofacial Prosthetic Educators (yMPE)
    • Related Report
      2022 Research-status Report
    • Int'l Joint Research / Invited
  • [Presentation] 高精細裸眼立体視ディスプレイの医歯学教育への実用2022

    • Author(s)
      板宮朋基
    • Organizer
      第65回日本形成外科学会総会・学術集会
    • Related Report
      2022 Research-status Report
    • Invited
  • [Presentation] 高精細裸眼立体視ディスプレイを用いた解剖学教育アプリの開発と実用2022

    • Author(s)
      板宮朋基,高詰佳史,今西宣晶,東雅啓,松尾雅斗
    • Organizer
      第54回日本医学教育学会大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 自由視点の実写レイヤー解剖教材の作成と利用2022

    • Author(s)
      髙詰佳史, 今西 宣晶, 東雅啓, 松尾雅斗, 板宮朋基
    • Organizer
      第54回日本医学教育学会大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 単眼カメラ映像のリアルタイム裸眼立体視化システムの構築2022

    • Author(s)
      板宮朋基, 中野亜希人, 有輪政尊, 小泉創,山口徹太郎
    • Organizer
      第28回日本バーチャルリアリティ学会大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 裸眼立体視ディスプレイを用いた遠隔歯科症例検討システムの開発2022

    • Author(s)
      中野亜希人, 板宮朋基, 有輪政尊, 小泉創,山口徹太郎
    • Organizer
      第28回日本バーチャルリアリティ学会大会
    • Related Report
      2022 Research-status Report
  • [Presentation] 裸眼立体視ディスプレイと触覚再現デバイスを用いた遠隔手技実習システムの開発2022

    • Author(s)
      板宮朋基
    • Organizer
      第32回日本シミュレーション外科学会
    • Related Report
      2022 Research-status Report

URL: 

Published: 2022-04-19   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi