• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

情報技術も用いた日本手話の手指動作類語辞書の網羅的で効率的な編纂

研究課題

研究課題/領域番号 20K20848
研究種目

挑戦的研究(萌芽)

配分区分基金
審査区分 中区分9:教育学およびその関連分野
研究機関立命館大学

研究代表者

田中 省作  立命館大学, 文学部, 教授 (00325549)

研究分担者 本田 久平  大分工業高等専門学校, 電気電子工学科, 教授 (40342589)
研究期間 (年度) 2020-07-30 – 2025-03-31
研究課題ステータス 交付 (2023年度)
配分額 *注記
6,240千円 (直接経費: 4,800千円、間接経費: 1,440千円)
2022年度: 1,690千円 (直接経費: 1,300千円、間接経費: 390千円)
2021年度: 1,950千円 (直接経費: 1,500千円、間接経費: 450千円)
2020年度: 2,600千円 (直接経費: 2,000千円、間接経費: 600千円)
キーワード日本手話 / 手指・腕形動作 / 動作類語 / 姿勢・手指形推定 / 奥行き / 動的計画法 / ダイナミックタイムワーピング距離 / 欠損があるベクトル表現 / 単純語 / 手指動作 / 類語 / 画像認識 / 言語処理
研究開始時の研究の概要

日本手話において手指動作が似ている単語(手指動作類語)は多くある.しかし,手指動作類語に関する網羅的な資料は作られていない.なぜなら,動作が似ている組み合わせに何かしらの必然性があるわけではなく,一から動作を確認していくにも,その組み合わせは膨大(単語が千オーダのとき組み合わせは百万オーダ)だからである.そこで本研究は,画像認識や言語処理といった情報技術を巧みに導入し,次のような特徴を備えた手指動作類語を効率的に編纂する.編纂する辞書は類語の網羅性に加え,類語の組み合わせごとに,動作が似ているながらもとくに異なる点はどこか,錯誤が起こりやすい文脈といった情報も提示する.

研究実績の概要

前年度までの成果を併せ、今年度は主に次の2テーマを重点的に推進した。
1.手話表現間の類似度計算と類似表現検索:前年度よりダイナミックタイムワーキング(DTW)距離に基づいた高速な類似度計算法を導入している。今年度は2022年前半期に導入した特徴量(手の形・手のひらの向き・肩を基準とした手首の相対的な位置・肩を基準とした肘の相対的な位置)にくわえ、肩を基準とした手首と肘の位置の単位時間当たりの変化分、それぞれの加速度も考慮した構成を施した。実験の結果、十分な精度が得られず、特徴量の再構成の必要が示唆された。現時点では、2022年前半期に採用した素直な構成の方が有効と考えている。いったんその構成に立ち戻り、現在、捨象している個人間の表出速度の違いの問題に対応できるような前処理を施したうえで、DTW距離に基づいた方法を融合する方向性を確認した。
2.類似表現に関する実験評価法の策定:動作類語の検出のための実験をどのように評価するか、今後、継続的な研究でも基準とし得るような枠組みの策定を行った。動作類語の検出に対する評価は、情報検索同様、適合率・再現率、それらを総合したF値がわかりやすく、一般的な指標と考えられる。当然のことながらこれらの指標の真値を直接推定することはできないので、テストセットのようなものの策定が求められる。後続研究でも利用できる、ベースラインとすべきデータの選定や、実際にそれらのサブセットに複数名で類似判定を試行するなどし、評価基準の検討をおこなった。

現在までの達成度 (区分)
現在までの達成度 (区分)

3: やや遅れている

理由

高精度で、高速な手話表現間の類似性判定を実現できておらず、最終成果物の動作類語辞書を編纂できていない。

今後の研究の推進方策

特徴量を過年度のものに戻し、高速化した上で、類似性判定および動作類語辞書の編纂と、併せて実験評価を行う。

報告書

(4件)
  • 2023 実施状況報告書
  • 2022 実施状況報告書
  • 2021 実施状況報告書
  • 2020 実施状況報告書
  • 研究成果

    (15件)

すべて 2023 2022 2021

すべて 雑誌論文 (4件) (うち査読あり 2件) 学会発表 (8件) (うち招待講演 1件) 図書 (1件) 学会・シンポジウム開催 (2件)

  • [雑誌論文] Parallel Navigation of Multi-Drones using City Information for Search and Rescue Operations2022

    • 著者名/発表者名
      Mbaitiga, Zacharie・Tanaka, Shosaku
    • 雑誌名

      Journal of Information and Communication Engineering

      巻: 8(2) ページ: 529-532

    • 関連する報告書
      2022 実施状況報告書
    • 査読あり
  • [雑誌論文] 姿勢・手指形推定に基づいた手話動作類語の試行的同定2022

    • 著者名/発表者名
      田中省作・本田久平・バイティガザカリ
    • 雑誌名

      統計数理研究所共同研究リポート

      巻: 459 ページ: 1-8

    • 関連する報告書
      2021 実施状況報告書
  • [雑誌論文] New Image Processing Application for Life Signs Detection2021

    • 著者名/発表者名
      Mbaitiga, Zacharie・Tanaka, Shosaku
    • 雑誌名

      Journal of Advanced Control, Automation and Robotics

      巻: 5(1) ページ: 181-188

    • 関連する報告書
      2021 実施状況報告書
    • 査読あり
  • [雑誌論文] ネットワーク分析に基づいた日本手話初学者の指文字読取の誤り分析2021

    • 著者名/発表者名
      田中省作・本田久平・長谷川由美
    • 雑誌名

      統計数理研究所共同研究リポート

      巻: 450 ページ: 23-44

    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 自然言語処理の哲学2023

    • 著者名/発表者名
      田中省作
    • 学会等名
      立命館大学国際言語文化研究所主催・連続講座「言語研究のためのデータ獲得の方法論、そして言語の機械処理」
    • 関連する報告書
      2023 実施状況報告書
    • 招待講演
  • [学会発表] 手の関節情報とDTWを用いた手話動画の類似検索2023

    • 著者名/発表者名
      八島永知・本田久平・田中省作
    • 学会等名
      2023年電子情報通信学会総合大会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 手関節のAI認識を用いた指文字学習支援Webシステム2023

    • 著者名/発表者名
      本田久平・田中省作・長谷川由美・宮崎佳典
    • 学会等名
      日本教育工学会2023年春季全国大会
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 姿勢・手指形推定を活用した手話動作類語の単純な同定法2022

    • 著者名/発表者名
      田中省作・本田久平・バイティガザカリ
    • 学会等名
      第21回情報科学技術フォーラム
    • 関連する報告書
      2022 実施状況報告書
  • [学会発表] 姿勢・手指形推定を単純に活用した手話表現の検索2022

    • 著者名/発表者名
      田中省作・本田久平・バイティガザカリ
    • 学会等名
      情報処理学会第84回全国大会講演論文集
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 日本手話初学者の指文字読取誤りに対するネットワーク分析2021

    • 著者名/発表者名
      田中省作・本田久平・長谷川 由美
    • 学会等名
      日本教育工学会2021年秋季全国大会
    • 関連する報告書
      2021 実施状況報告書
  • [学会発表] 指文字学習支援システムの開発2021

    • 著者名/発表者名
      徳永和彦・本田久平・長谷川由美・田中省作
    • 学会等名
      令和2年度電気学会九州支部高専研究講演会
    • 関連する報告書
      2020 実施状況報告書
  • [学会発表] 日本手話初学者の指文字読取の誤り分析2021

    • 著者名/発表者名
      田中省作
    • 学会等名
      言語と統計2021
    • 関連する報告書
      2020 実施状況報告書
  • [図書] 指文字 in JSL2021

    • 著者名/発表者名
      長谷川由美・本田久平・田中省作
    • 総ページ数
      52
    • 出版者
      麦の郷
    • 関連する報告書
      2020 実施状況報告書
  • [学会・シンポジウム開催] 2023 8th International Conference on Intelligent Informatics and Biomedical Science (ICIIBMS)2023

    • 関連する報告書
      2023 実施状況報告書
  • [学会・シンポジウム開催] 2022 7th International Conference on Intelligent Informatics and Biomedical Science (ICIIBMS)2022

    • 関連する報告書
      2022 実施状況報告書

URL: 

公開日: 2020-08-03   更新日: 2024-12-25  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi