• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

手話認識システムを利用した手手辞典の開発と手話による百科事典の提案

研究課題

研究課題/領域番号 18K18517
研究種目

挑戦的研究(萌芽)

配分区分基金
審査区分 中区分2:文学、言語学およびその関連分野
研究機関豊田工業高等専門学校

研究代表者

木村 勉  豊田工業高等専門学校, 情報工学科, 教授 (80225044)

研究分担者 神田 和幸  国立民族学博物館, 人類基礎理論研究部, 外来研究員 (70132123)
研究期間 (年度) 2018-06-29 – 2023-03-31
研究課題ステータス 完了 (2022年度)
配分額 *注記
5,200千円 (直接経費: 4,000千円、間接経費: 1,200千円)
2020年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2019年度: 1,300千円 (直接経費: 1,000千円、間接経費: 300千円)
2018年度: 2,600千円 (直接経費: 2,000千円、間接経費: 600千円)
キーワード手話認識 / 手話辞書 / ディープラーニング / 深層学習 / 手話学習 / 手話文章 / 手話 / 認識 / 辞書 / オンライン
研究成果の概要

本研究では,手話認識機能を搭載したオンライン手話単語辞書システムを開発した.システムはブラウザから利用する.Webカメラを用いて調べたい手話を表現すると,それを認識して,候補単語の一覧を表示する.利用者が表示された単語をクリックすると,見本動画が再生し,確認することができる.現在は,175単語の認識が可能である.さらに,ここで開発した手話単語認識エンジンを応用して,手話学習システムの開発を行っている.これらは2023年度中に一般に公開する予定である.

研究成果の学術的意義や社会的意義

手話を学習するためには,手話サークルに通うなど,対面で習う必要がある.テレビなどでも学習できるが,自身の手話が相手に伝わるかどうかはわからない.英語学習であれば,音声認識を使ったシステムもあるが,手話にはそれがなかった.本研究は,手話学習者に大いに役立てると考えている.さらに,本研究で開発した手話認識用学習ネットワークは,単語だけでなく,手話文,指文字にも利用できる.今後,手話認識システムの開発にも応用できる.

報告書

(6件)
  • 2022 実績報告書   研究成果報告書 ( PDF )
  • 2021 実施状況報告書
  • 2020 実施状況報告書
  • 2019 実施状況報告書
  • 2018 実施状況報告書
  • 研究成果

    (11件)

すべて 2023 2022 2021 2019

すべて 雑誌論文 (1件) (うち査読あり 1件、 オープンアクセス 1件) 学会発表 (10件) (うち国際学会 1件)

  • [雑誌論文] Sign Language Recognition through Machine Learning by a New Linguistic Framework2019

    • 著者名/発表者名
      Tsutomu Kimura, Kazuyuki Kanda
    • 雑誌名

      Technology and Disability

      巻: 31 号: s1 ページ: 137-146

    • DOI

      10.3233/tad-190008

    • 関連する報告書
      2019 実施状況報告書
    • 査読あり / オープンアクセス
  • [学会発表] 手話認識における3軸特徴量の並列Conformerへの適用2023

    • 著者名/発表者名
      池田康希,木村 勉
    • 学会等名
      福祉情報工学研究会
    • 関連する報告書
      2022 実績報告書
  • [学会発表] ディープ・ラーニングを用いた手話認識に関する研究 ~ CTCとConformerの比較 ~2022

    • 著者名/発表者名
      磯谷光,木村勉,神田和幸
    • 学会等名
      第116回 福祉情報工学研究会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] ディープ・ラーニングを用いた手話認識に関する研究 ~ 手話文からの単語認識 ~2021

    • 著者名/発表者名
      磯谷光,木村勉,神田和幸
    • 学会等名
      第111回 福祉情報工学研究会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 手話認識機能を備えた手話辞書システムの開発2021

    • 著者名/発表者名
      木村勉,鈴木洸輔,石濵春,吉田あすか,神田和幸
    • 学会等名
      第111回 福祉情報工学研究会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 類似手話語彙の平面データによる光学的識別法(1)―特徴点の抽出と遷移の検証―2019

    • 著者名/発表者名
      木村 勉,神田 和幸
    • 学会等名
      第18回情報科学技術フォーラム
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] 類似手話語彙の平面データによる光学的識別法(2)―平面データと立面データの比較―2019

    • 著者名/発表者名
      神田 和幸.木村 勉
    • 学会等名
      第18回情報科学技術フォーラム
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] Sign Language Recognition through Machine Learning by a New Linguistic Framework2019

    • 著者名/発表者名
      Kimura Tsutomu, Kanda Kazuyuki
    • 学会等名
      Association for the Advancement of Assistive Technology in Europe 2019
    • 関連する報告書
      2019 実施状況報告書
  • [学会発表] 機械学習を用いた手話認識に関する研究2019

    • 著者名/発表者名
      髙橋 佑汰,木村 勉,神田 和幸
    • 学会等名
      福祉情報工学研究会
    • 関連する報告書
      2018 実施状況報告書
  • [学会発表] 描素の構造 ~ 新手話学の演繹的アプローチ ~2019

    • 著者名/発表者名
      神田 和幸.木村 勉
    • 学会等名
      福祉情報工学研究会
    • 関連する報告書
      2018 実施状況報告書
  • [学会発表] Study on sign language recognition using machine learning2019

    • 著者名/発表者名
      T. Kimura, Y.Takahashi, K.Kanda
    • 学会等名
      Association for the Advancement of Assistive Technology in Europe 2019
    • 関連する報告書
      2018 実施状況報告書
    • 国際学会

URL: 

公開日: 2018-07-25   更新日: 2024-01-30  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi