| Project/Area Number |
22K21274
|
|---|
| Research Category |
Grant-in-Aid for Research Activity Start-up
|
| Allocation Type | Multi-year Fund |
|---|
| Review Section |
1001:Information science, computer engineering, and related fields
|
|---|
| Research Institution | University of Yamanashi |
|---|
Principal Investigator |
ZHU ZHENYANG 山梨大学, 大学院総合研究部, 助教 (10954927)
|
|---|
| Project Period (FY) |
2022-08-31 – 2024-03-31
|
| Project Status |
Completed (Fiscal Year 2023)
|
| Budget Amount *help |
¥2,860,000 (Direct Cost: ¥2,200,000、Indirect Cost: ¥660,000)
Fiscal Year 2023: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
Fiscal Year 2022: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000)
|
|---|
| Keywords | 色覚補償 / 拡張現実 / 深層学習 / 意味論的情報 / 色覚障がい支援 |
|---|
| Outline of Research at the Start |
本研究課題では，色覚障がいによる意味論的情報損失を補償するために，深層学習モデル及びAR Glassesを取り入れた色覚補償技術の確立に向けて，以下の３つの課題に取り組む．(1)AR Glassesを装着するユーザを中心にし，深層学習モデルを搭載するサーバと連携し，ユーザに色覚支援用情報を提供する．(2)ユーザがおかれるシチュエーションに合わせて，二つの使用モードを設計し，それぞれに必要な深層学習モデルを実装する．(3)実装される深層学習モデルの学習に必要とされる色ラベル付き画像データセットを収集するために，既存のオブジェクト検出用深層学習モデルを利用して，自動的な収集方法を開発する．
|
| Outline of Final Research Achievements |
In this study, a color vision compensation system called Color Communication Glasses (CC-Glasses) was developed, which incorporates a deep learning model and augmented reality (AR) glasses to compensate for semantic information loss due to color vision deficiency (CVD). Assuming that users with CVD have difficulty identifying target objects specified by colors, the system sends scenes shot captured by AR glasses to a server that incorporates a deep learning model, and displays the analyzed results on AR glasses. We created a dataset for training the deep learning model used in this study. Moreover, in order to verify the effectiveness of the proposed system, an evaluation experiment involving people with CVD was conducted.
|
| Academic Significance and Societal Importance of the Research Achievements |
本研究は医学と情報工学の共同研究であり，未だに医学的な根治手段が見つかってない色覚障がいに対する情報技術による支援策を提供する．医工融合研究の重要性に関する発信にもつながる．本研究で開発するAI技術により，色の意味情報損失が補償され，CVD患者が自力で色を正確に認識したり形容することが可能となり，危険にさらされるリスクを避けることができる．また，日常生活補助のみならず，仕事面でも活躍できる分野が広がると考えられる．さらに，CVD患者が周囲とのコミュニケーションがより取りやすくなるため，社会全体においてQoLの向上が期待される．
|
