• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2014 Fiscal Year Annual Research Report

手話からの特定連続指文字のスポッティングシステム

Research Project

Project/Area Number 25282173
Research InstitutionUniversity of Tsukuba

Principal Investigator

福井 和広  筑波大学, システム情報系, 教授 (40375423)

Co-Investigator(Kenkyū-buntansha) 岡崎 彰夫  筑波技術大学, 産業技術学部, 教授 (20516679)
加藤 伸子  筑波技術大学, 産業技術学部, 教授 (90279555)
Project Period (FY) 2013-04-01 – 2016-03-31
Keywords指文字 / 多視点画像 / 動画像
Outline of Annual Research Achievements

本年度は以下の項目について研究を実施した.
【スポッティング機能強化】(1)昨年度は動き形状類似度を測る際,TER (Time elastic random)特徴に対して相互部分空間法(MSM)を適用していた.これに対して本年度はMSMに替えて,より高い識別性能を有するグラスマン判別分析(GDA)を適用した.これにより,識別性能が73%から74.3%へと向上した.(2)TER特徴を用いた方式は性能が高い分,処理量が多い.そこで(1)とは別のアプローチとして,複数のカーネル直交相互部分空間法(KOMSM)を並列的に用いた方式も併せて検討した.この方式では,手の動きの時間方向縮伸に対応するために,更新係数の異なる複数入力部分空間を並列で識別し,これから得られた複数の類似度の平均を最終的な類似度とした.
【システム構築】距離センサ(Microsoft Kinect for Windows v2)の台数は1台,センサから対象者の手までの距離は1.4m程度とした.配置はやや下向きから見上げる位置が有効であった.
【システム評価】性能評価のために,8種類の連続指文字(“センサ”,“Kinect”, “ロバスト”,“パターン”,“41”, “38”, “図1”,“79”)を含む文章を日常的に手話,指文字を使用している筑波技大の学生に発話してもらい,その様子をビデオ撮影した.データ収集では,カメラに対して正面,少し向きを変えた5方向について,それぞれ4回撮影を行った.性能評価の結果,連続指文字の長さに依存して,検出性能(Error equal rate)が2%から25%程度まで大きく変動することが分かった.特に”Kinect”のような長い単語はEERが高く,対策が必要であることが分かった.

Current Status of Research Progress
Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

以下の理由による.要素技術の研究開発が当初計画に比べてやや遅れており,それに連動して性能評価の実施にも遅れが生じている.また当初の予定には無かったグラスマン多様体の導入により,動き形状類似度に関する研究項目が増え,性能評価および成果発表に予定以上の時間が必要となった.

Strategy for Future Research Activity

上記遅れを取り戻すように,評価実験の実施スケジュールを適切に修正する.さらに動き形状類似度に関する研究については,現在の研究成果を早急に整理し,論文投稿に向けて作業を加速する.

Causes of Carryover

先に述べたように,性能評価の実施やTER特徴を用いた動き形状類似度に関する研究成果の発表準備に遅れが生じ,研究計画の一部がを予定通りには実施できなくなった.そこでこれらに掛かる諸経費を次年度に繰り越す.

Expenditure Plan for Carryover Budget

性能評価の実施,成果発表のための旅費,および論文投稿に掛かる費用として使用する予定である.

  • Research Products

    (14 results)

All 2015 2014

All Journal Article (7 results) (of which Acknowledgement Compliant: 7 results) Presentation (7 results)

  • [Journal Article] 動きを伴う指文字を含めた距離画像を用いた対話的指文字練習システムの開発と評価2015

    • Author(s)
      近藤真暉,加藤伸子,福井和広,岡崎彰夫
    • Journal Title

      電子情報通信学会 信学技法 WIT研究会

      Volume: 114 Pages: 23-28

    • Acknowledgement Compliant
  • [Journal Article] 距離画像から得られる形状空間に基づく手の形状識別と姿勢推定2015

    • Author(s)
      菊池 優介, 日野 英逸,福井 和広
    • Journal Title

      情報処理学会 CVIM研究会

      Volume: 196 Pages: 1-8

    • Acknowledgement Compliant
  • [Journal Article] 距離画像を用いた動きのある指文字を含めた指文字練習システムの開発2014

    • Author(s)
      近藤真暉,加藤伸子,福井和広,岡崎彰夫
    • Journal Title

      ヒューマンインタフェースシンポジウム2014予稿集

      Volume: 2532D Pages: 1-6

    • Acknowledgement Compliant
  • [Journal Article] 距離動画像列からの特定ジェスチャのスポッティング2014

    • Author(s)
      田中翔平,加藤伸子,岡崎彰夫,福井和広
    • Journal Title

      FIT2014

      Volume: K-027 Pages: 1-4

    • Acknowledgement Compliant
  • [Journal Article] 指文字認識システムにおける効果的な辞書生成の検討2014

    • Author(s)
      渋谷美彩, 田中翔平, 日野英逸 加藤伸子,岡崎彰夫,福井和広
    • Journal Title

      FIT2014

      Volume: K-026 Pages: 1-4

    • Acknowledgement Compliant
  • [Journal Article] Hand shape recognition using position invariant feature from the sequence of depth images2014

    • Author(s)
      張燕, Chendra Hadi SURYANTO, 福井和広
    • Journal Title

      FIT2014

      Volume: J-014 Pages: 1-4

    • Acknowledgement Compliant
  • [Journal Article] Gesture recognition with multiple features from hands and face using depth sensor2014

    • Author(s)
      Graciliano Garcia Torres Galindo Jr, Chendra Hadi SURYANTO, 福井和広
    • Journal Title

      FIT2014

      Volume: J-013 Pages: 1-4

    • Acknowledgement Compliant
  • [Presentation] 動きを伴う指文字を含めた距離画像を用いた対話的指文字練習システムの開発と評価2015

    • Author(s)
      近藤真暉
    • Organizer
      電子情報通信学会 WIT研究会
    • Place of Presentation
      筑波技術大(茨城)
    • Year and Date
      2015-03-13 – 2015-03-13
  • [Presentation] 距離画像から得られる形状空間に基づく手の形状識別と姿勢推定2015

    • Author(s)
      菊池優介
    • Organizer
      情報処理学会 CVIM研究会
    • Place of Presentation
      東北大学(宮城)
    • Year and Date
      2015-03-06 – 2015-03-06
  • [Presentation] 距離画像を用いた動きのある指文字を含めた指文字練習システムの開発2014

    • Author(s)
      近藤真暉
    • Organizer
      ヒューマンインタフェースシンポジウム2014
    • Place of Presentation
      はこだて未来大学(北海道)
    • Year and Date
      2014-09-11 – 2014-09-11
  • [Presentation] 距離動画像列からの特定ジェスチャのスポッティング2014

    • Author(s)
      田中翔平
    • Organizer
      FIT2014
    • Place of Presentation
      筑波大学(茨城)
    • Year and Date
      2014-09-04 – 2014-09-04
  • [Presentation] 指文字認識システムにおける効果的な辞書生成の検討2014

    • Author(s)
      渋谷美彩
    • Organizer
      FIT2014
    • Place of Presentation
      筑波大学(茨城)
    • Year and Date
      2014-09-04 – 2014-09-04
  • [Presentation] Hand shape recognition using position invariant feature from the sequence of depth images2014

    • Author(s)
      張燕
    • Organizer
      FIT2014
    • Place of Presentation
      筑波大学(茨城)
    • Year and Date
      2014-09-03 – 2014-09-03
  • [Presentation] Gesture recognition with multiple features from hands and face using depth sensor2014

    • Author(s)
      Graciliano Garcia Torres Galindo Jr
    • Organizer
      FIT2014
    • Place of Presentation
      筑波大学(茨城)
    • Year and Date
      2014-09-03 – 2014-09-03

URL: 

Published: 2016-06-01  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi