• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Research on a Computerized System to Make Inclusive Environment for Online STEM Education Be Barrier-Free from an International Viewpoint

Research Project

Project/Area Number 21H04415
Research Category

Grant-in-Aid for Scientific Research (A)

Allocation TypeSingle-year Grants
Section一般
Review Section Medium-sized Section 9:Education and related fields
Research InstitutionNihon University (2022-2024)
Nihon University Junior College (2021)

Principal Investigator

山口 雄仁  日本大学, 理工学部, 研究特命教授 (00182428)

Co-Investigator(Kenkyū-buntansha) 藤芳 明生  茨城大学, 理工学研究科(工学野), 教授 (00323212)
渡辺 哲也  新潟大学, 自然科学系, 教授 (10342958)
駒田 智彦  日本大学短期大学部, その他部局等, 准教授 (30360316)
相澤 彰子  国立情報学研究所, コンテンツ科学研究系, 教授 (90222447)
鈴木 昌和  九州大学, マス・フォア・インダストリ研究所, 名誉教授 (20112302)
Project Period (FY) 2021-04-05 – 2025-03-31
Project Status Granted (Fiscal Year 2024)
Budget Amount *help
¥41,080,000 (Direct Cost: ¥31,600,000、Indirect Cost: ¥9,480,000)
Fiscal Year 2024: ¥8,840,000 (Direct Cost: ¥6,800,000、Indirect Cost: ¥2,040,000)
Fiscal Year 2023: ¥8,840,000 (Direct Cost: ¥6,800,000、Indirect Cost: ¥2,040,000)
Fiscal Year 2022: ¥9,230,000 (Direct Cost: ¥7,100,000、Indirect Cost: ¥2,130,000)
Fiscal Year 2021: ¥14,170,000 (Direct Cost: ¥10,900,000、Indirect Cost: ¥3,270,000)
Keywordsインクルージョン / オンライン理数系教育 / バリアフリー / 視覚障害 / 発達性読み書き障害
Outline of Research at the Start

統合教育環境で学ぶ障害生徒・学生のオンライン理数系教育を総合的に支援するため,晴眼者用オンライン教育コンテンツを全盲・重度弱視・発達性読み書き障害などそれぞれのニーズに合わせて自動でバリアフリー化する技術などを研究開発する。こうした支援技術は発展途上国などでも現在広く必要とされているため,ユーザーが各自の言語用に自分で容易にカスタマイズできる多言語対応のシステム開発を目指す。

Outline of Annual Research Achievements

本課題研究を校正するA~Dの各研究グループが本年度達成した研究成果の概要は以下の通りである。
Aグループの山口は,マルチメディアDAISY/EPUB3形式バリアフリー・デジタル教材制作・編集・閲覧ソフトウェアの改良と多言語対応を一層進めるとともに,「固定レイアウト・デイジー」という発達性読み書き障害者向けの新たなアクセシブル電子書籍形式の開発に取り組んだ。また分担者の駒田と協力して,昨年度までに開発したパワーポイント用アドオンにさらに改良を加え,パワーポイントのスライドに含まれる数式に,容易にさまざまな言語で代替テキスト,および音声合成による読み上げ音声を貼り付ける機能などを実現した。
Bグループの藤芳は,PDFドキュメントの複雑なレイアウトを機械学習を用いて解析するソフトウェアの研究開発に取り組み,最先端のニューラルネットワークであるTransformerを活用してPDFドキュメントのレイアウトを学習するソフトウェアを開発することに成功した。
Cグループの渡辺は,ドイツのライプニッツ情報学センターで1週間にわたって開催されたDagstuhl SeminarのInclusive Data Visualizationをテーマとする会議に参加し,グラフや地図などの視覚的データを視覚障害者にどのようにアクセシブルにするかについて海外の第一線の研究者と議論を行い,それを今後の開発計画に活かす検討を行った。
Dグループの相澤は,数学の学習者を対象とした定理証明の理解支援に関する研究に引き続き取り組んだ。定理自動証明で用いられる形式記述と論文や教科書で用いられる自然言語による記述を相補的に用いるための方法論を検討し,数学の定理証明支援系Lean上に自然言語の構文解析機能を組み込んだプロトタイプシステムの開発を行った。

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

研究3年目の令和5年度は,本課題研究を構成する各研究グループにおいて,開発中のソフトウェアの改良や関連する調査・研究について,概要に示した通り概ね順調に実施し,それらの成果の一部はすでに実用ソフトウェアとして一般公開されている。
本年度は国内外で研究集会・国際会議がコロナ禍前に近い形で開催されるようになり,代表者と分担者は積極的にそれらに参加した。たとえば山口と駒田は令和5年8月パリ大学で開催された第17回AAATE国際会議に参加し,本課題研究による成果を2件報告するとともに,欧州を中心とする数多くの研究者と研究交流・意見交換を行った。また令和6年3月に米国アナハイムで開催された第39回CSUN障害者支援技術国際会議に参加し,主に米国の障害者支援関係者に,開発中のオンライン障害者支援サービスについて実演を交えて紹介した。
令和6年2月15~17日には本課題研究の科研費により,東京駿河台の日本大学理工学部を会場として,the 5th International Workshop on "Digitization and E-Inclusion in Mathematics and Science 2024" (DEIMS2024)をオンラインと対面のハイブリッドで開催した。基調講演2件(国内1,海外1),一般発表19件(海外14,国内5)の講演があり,本課題研究に関連する話題について,最新動向把握と有意義な意見交換・研究交流を行うことができた。今回の特色として発表者とその関係者のみならず,海外から聴講のみの対面参加者が何名もいて,さらに海外を中心としてオンライン参加者は53名,対面参加者34名とこれまでにない数多くの参加者があった。今回が5回目の開催となる本研究集会は小規模ながら,理数系情報のアクセシビリティの分野で国際的に重要性がかなり認められているとの心証を得た。

Strategy for Future Research Activity

最終年度の令和6年度は,本課題研究を構成するA~Dの各研究グループごとに次の分担で調査・研究開発を行い,研究の完成を目指す。これらを統括する作業は,分担者と協力して代表者の山口が行う。
A. 代表者の山口は研究協力者の川根とともに,開発中のマルチメディアDAISY/EPUB3形式バリアフリー・デジタル教材制作・編集・閲覧ソフトウェアの多言語・オンライン対応を完了するため,本年度に引き続いてソフトウェアの要素技術のいくつかを改良する研究開発を行う。分担者の駒田は,パワーポイント理数系コンテンツのアクセシビリティを実現するツールの開発を一層進めるとともに,多言語化にも取り組む。
B. 分担者の藤芳は引き続きPDF文書処理の基礎技術としてPDFファイルから情報を抽出するソフトウェアの開発,およびPDFファイルに加工を施す技術の研究を行うとともに,読み書き障害者の利便性を向上させるための技術として,PDF文章の縦書きと横書きの変換などの課題に取り組む。研究協力者の鈴木,金堀は,理数系文書のPDFをアクセシブルな形式に変換するシステムに関連する技術開発,特にオンライン化・多言語化の完成を目指す。
C. 分担者の渡辺は,触察物を使った遠隔指導について行った調査に基づき,課題の特定とその解決方法の確立を図る。
D. 分担者の相澤は理数系コンテンツの理解支援の実現に向けて,文章中に出現する数量表現の意味解析手法の研究を一層進めるとともに,数学定理証明に焦点をあてて,数学的知識の理解支援の研究に引き続き取り組む。
年度末の令和7年2月には国内研究集会を開催し,それまでの研究成果を広く社会に公開するとともに,開発したソフトウェアを世界に向けて公開し,国際的にオンラインの理数教育環境改善に資することを目指す。

Report

(4 results)
  • 2023 Annual Research Report
  • 2022 Annual Research Report
  • 2021 Comments on the Screening Results   Annual Research Report
  • Research Products

    (23 results)

All 2024 2023 2022 2021 Other

All Journal Article (8 results) (of which Peer Reviewed: 8 results,  Open Access: 8 results) Presentation (12 results) (of which Int'l Joint Research: 6 results) Remarks (2 results) Funded Workshop (1 results)

  • [Journal Article] Graph Linear Notations with Regular Expressions2024

    • Author(s)
      MIMURA Ren、MIYAMOTO Kengo、FUJIYOSHI Akio
    • Journal Title

      IEICE Transactions on Information and Systems

      Volume: E107.D Issue: 3 Pages: 312-319

    • DOI

      10.1587/transinf.2023FCP0006

    • ISSN
      0916-8532, 1745-1361
    • Year and Date
      2024-03-01
    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Shortest Matching of String Sequences Problem2023

    • Author(s)
      宮部 恭兵, 宮本 賢伍, 藤芳 明生
    • Journal Title

      電子情報通信学会論文誌D 情報・システム

      Volume: J106-D Issue: 9 Pages: 435-444

    • DOI

      10.14923/transinfj.2022JDP7043

    • ISSN
      1880-4535, 1881-0225
    • Year and Date
      2023-09-01
    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] On Support for Dyslexic students in Senior-high School and Higher Education2023

    • Author(s)
      Katsuhito Yamaguchi and Masakazu Suzuki
    • Journal Title

      Studies in Health Technology and Informatics

      Volume: Vol.306 Pages: 137-143

    • DOI

      10.3233/shti230608

    • ISBN
      9781643684222, 9781643684239
    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Multilingual Support for Accessibility in PowerPoint STEM Contents2023

    • Author(s)
      Toshihiko Komada, Katsuhito Yamaguchi and Masakazu Suzuki
    • Journal Title

      Studies in Health Technology and Informatics

      Volume: Vol.306 Pages: 144-150

    • DOI

      10.3233/shti230609

    • ISBN
      9781643684222, 9781643684239
    • Related Report
      2023 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] 視覚障害者への遠隔パソコン講習と遠隔図形指導に関する調査2023

    • Author(s)
      渡辺哲也
    • Journal Title

      視覚リハビリテーション研究

      Volume: Vol.12, No.2 Pages: 25-28

    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Conversion of Multi-Lingual STEM Documents in E-Born PDF into Various Accessible E-Formats2022

    • Author(s)
      Masakazu Suzuki and Katsuhito Yamaguchi
    • Journal Title

      Proc. 18th International Conference on Computers Helping People with Special Needs (ICCHP-AAATE 2022)

      Volume: LNCS 13341 Pages: 7-14

    • DOI

      10.1007/978-3-031-08648-9_2

    • ISBN
      9783031086472, 9783031086489
    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Simulating the Answering Process of Dyslexic Students for Audio Versions of the Common Test for University Admissions2022

    • Author(s)
      Masashi Hatakeyama and Akio Fujiyoshi
    • Journal Title

      Proc. 18th International Conference on Computers Helping People with Special Needs (ICCHP-AAATE 2022)

      Volume: LNCS 13342 Pages: 328-334

    • DOI

      10.1007/978-3-031-08648-9_3

    • ISBN
      9783031086472, 9783031086489
    • Related Report
      2022 Annual Research Report
    • Peer Reviewed / Open Access
  • [Journal Article] Assimilating the structure of formal and informal proof2021

    • Author(s)
      Kensho Tsurusaki and Akiko Aizawa
    • Journal Title

      Proc. Workshop on Natural Formal Mathematics (NatFoM 2021), at the 14th Conference on Intelligent Computer Mathematics (CICM 2021)

      Volume: - Pages: 26-31

    • Related Report
      2021 Annual Research Report
    • Peer Reviewed / Open Access
  • [Presentation] A Tool for Improving Readability of Japanese PDF Files for the Print Disabled and People with Foreign Roots2024

    • Author(s)
      Akio Fujiyoshi
    • Organizer
      DEIMS2024
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Classification of Tactile Maps for Blind and Visually Impaired People2024

    • Author(s)
      Tetsuya Watanabe
    • Organizer
      DEIMS2024
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] New Accessibility Platform ”Chatty Library”2023

    • Author(s)
      Katsuhito Yamaguchi and Toshihiko Komada
    • Organizer
      39th Annual CSUN Assistive Technology Conference
    • Related Report
      2023 Annual Research Report
    • Int'l Joint Research
  • [Presentation] A Powerful Tool to Make PowerPoint STEM Contents Accessible2023

    • Author(s)
      Toshihiko Komada, Katsuhito Yamaguchi and Toshihiro Kanahori
    • Organizer
      38th Annual CSUN Assistive Technology Conference
    • Related Report
      2022 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 正規表現で拡張されたグラフ線形表記2023

    • Author(s)
      三村 廉, 宮部 恭兵, 宮本 賢伍, 藤芳 明生
    • Organizer
      2022年度冬のLAシンポジウム(京都大学数理解析研究所)
    • Related Report
      2022 Annual Research Report
  • [Presentation] 文芸的プログラミングによる形式的証明の可読性向上2023

    • Author(s)
      津留﨑 堅章,相澤 彰子
    • Organizer
      日本学術振興会 令和4年度科学研究費補助金等による研究集会「情報アクセシビリティをめぐる諸問題に関する研究集会」
    • Related Report
      2022 Annual Research Report
  • [Presentation] PDFからデイジーへの自動変換について ~ニーズと課題~2023

    • Author(s)
      鈴木 昌和
    • Organizer
      日本学術振興会 令和4年度科学研究費補助金等による研究集会「情報アクセシビリティをめぐる諸問題に関する研究集会」
    • Related Report
      2022 Annual Research Report
  • [Presentation] Inftyソフトウェアを利用したアクセシブルな理数系パワーポイント教材の効率的な制作について2023

    • Author(s)
      駒田 智彦
    • Organizer
      日本学術振興会 令和4年度科学研究費補助金等による研究集会「情報アクセシビリティをめぐる諸問題に関する研究集会」
    • Related Report
      2022 Annual Research Report
  • [Presentation] 文字列シーケンスの最短マッチング2022

    • Author(s)
      宮部 恭兵, 三村 廉, 宮本 賢伍, 藤芳 明生
    • Organizer
      2021年度冬のLAシンポジウム(京都大学数理解析研究所)
    • Related Report
      2021 Annual Research Report
  • [Presentation] An Efficient Method to Produce Accessible Contents for Online STEM Education2022

    • Author(s)
      Toshihiko Komada, Katsuhito Yamaguchi and Masakazu Suzuki
    • Organizer
      the 1st joint ICCHP-AAATE conference, Politecnico di Milano
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Conversion of Multi-Lingual STEM Documents in E-Born PDF into Various Accessible E-Formats2022

    • Author(s)
      Masakazu Suzuki and Katsuhito Yamaguchi
    • Organizer
      the 1st joint ICCHP-AAATE conference, Politecnico di Milano
    • Related Report
      2021 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 理工系オンライン授業のためのマルチメディア教材作成システムの開発2021

    • Author(s)
      駒田 智彦, 山口 雄仁, 鈴木 昌和
    • Organizer
      2021年度ICT利用による教育改善研究発表会 B-2, オンライン(私立大学情報教育協会)
    • Related Report
      2021 Annual Research Report
  • [Remarks] DEIMS2024

    • URL

      http://workshop.sciaccess.net/deims2024/

    • Related Report
      2023 Annual Research Report
  • [Remarks] DEIMS2021

    • URL

      http://workshop.sciaccess.net/deims2021/

    • Related Report
      2021 Annual Research Report
  • [Funded Workshop] the 5th International Workshop on "Digitization and E-Inclusion in Mathematics and Science 2024" (DEIMS2024)2024

    • Related Report
      2023 Annual Research Report

URL: 

Published: 2021-04-28   Modified: 2024-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi