• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Study on construction of sign language morphological dictionary by 3D animation and its application to sign language engineering

Research Project

Project/Area Number 26244021
Research Category

Grant-in-Aid for Scientific Research (A)

Allocation TypeSingle-year Grants
Section一般
Research Field Linguistics
Research InstitutionKogakuin University

Principal Investigator

NAGASHIMA YUJI  工学院大学, 情報学部(情報工学部), 教授 (50138137)

Project Period (FY) 2014-04-01 – 2017-03-31
Project Status Completed (Fiscal Year 2016)
Budget Amount *help
¥40,690,000 (Direct Cost: ¥31,300,000、Indirect Cost: ¥9,390,000)
Fiscal Year 2016: ¥4,160,000 (Direct Cost: ¥3,200,000、Indirect Cost: ¥960,000)
Fiscal Year 2015: ¥13,390,000 (Direct Cost: ¥10,300,000、Indirect Cost: ¥3,090,000)
Fiscal Year 2014: ¥23,140,000 (Direct Cost: ¥17,800,000、Indirect Cost: ¥5,340,000)
Keywords手話 / 形態素解析 / 形態素辞書 / 福祉工学
Outline of Final Research Achievements

In this research, we constructed a medical sign language morphological dictionary that enables users to view 3D animated images of sign language motions. The data of the 3D sign language motions were obtained using optical motion capture technology. The data of the 3D motions are in BVH format. The words contained in the dictionary are described using the NVSG element model that is suggested by the authors. Because the notation results are stored in SQLite format, it is possible to construct a morpheme dictionary database. Accordingly, the dictionary permits searches of sign language motions with unknown meanings by hand shape, motion, and other elements.
In solving common subjects, we developed the system which supported the analysis and notation of a phoneme level of the sign language by using 3D motion data in BVH format. Furthermore, we developed a 3D viewer that renders animated images of sign language in real time by reading the BVH data.

Report

(4 results)
  • 2016 Annual Research Report   Final Research Report ( PDF )
  • 2015 Annual Research Report
  • 2014 Annual Research Report
  • Research Products

    (35 results)

All 2017 2016 2015 2014

All Journal Article (6 results) (of which Peer Reviewed: 6 results,  Acknowledgement Compliant: 4 results,  Open Access: 1 results) Presentation (29 results) (of which Int'l Joint Research: 4 results)

  • [Journal Article] The Information Input Supporting System for Sign Language Morpheme Dictionary2017

    • Author(s)
      渡辺桂子, 長嶋祐二
    • Journal Title

      電子情報通信学会論文誌D 情報・システム

      Volume: J100-D Issue: 3 Pages: 298-309

    • DOI

      10.14923/transinfj.2016PDP0014

    • ISSN
      1880-4535, 1881-0225
    • Year and Date
      2017-03-01
    • Related Report
      2016 Annual Research Report
    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] Development and Evaluation of a Machine Translation System from Japanese Texts to Sign Language CG Animations for Weather News2017

    • Author(s)
      加藤直人, 宮太郎, 井上誠喜, 金子浩之, 比留間伸行, 長嶋祐二
    • Journal Title

      電子情報通信学会論文誌D 情報・システム

      Volume: J100-D Issue: 2 Pages: 217-229

    • DOI

      10.14923/transinfj.2016JDP7071

    • ISSN
      1880-4535, 1881-0225
    • Year and Date
      2017-02-01
    • Related Report
      2016 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Sign Language Expression Research of Medical Words and Construction of the Word Database2016

    • Author(s)
      渡辺桂子, 長嶋祐二
    • Journal Title

      電子情報通信学会論文誌D 情報・システム

      Volume: J99-D Issue: 1 Pages: 76-89

    • DOI

      10.14923/transinfj.2015HAP0027

    • ISSN
      1880-4535, 1881-0225
    • Year and Date
      2016-01-01
    • Related Report
      2015 Annual Research Report
    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Journal Article] A Study on How to Express Non-manual Markers in the Electronic Dictionary of Japanese Sign Language2015

    • Author(s)
      M. Terauchi, Y. Nagashima
    • Journal Title

      IFIP International Federation for Information Processing 2015

      Volume: LNCS 9299 Pages: 502-505

    • DOI

      10.1007/978-3-319-22723-8_48

    • ISBN
      9783319227221, 9783319227238
    • Related Report
      2015 Annual Research Report
    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] 日本手話の形態素解析のためのNVSG要素モデル2015

    • Author(s)
      渡辺桂子, 寺内美奈, 長嶋祐二
    • Journal Title

      電子情報通信学会 和文論文誌A

      Volume: J98-A Pages: 113-128

    • Related Report
      2014 Annual Research Report
    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] 動画ピクトグラムを利用した駅でのコミュニケーション支援システム2014

    • Author(s)
      中園薫, 角田麻里, 長嶋祐二
    • Journal Title

      観光情報学会,観光と情報

      Volume: 10 Pages: 87-100

    • NAID

      40020251546

    • Related Report
      2014 Annual Research Report
    • Peer Reviewed
  • [Presentation] 3次元ビューア機能付き医療用手話辞書の作成2017

    • Author(s)
      渡辺桂子, 幸田拓也, 長嶋祐二
    • Organizer
      情報処理学会研究報告
    • Place of Presentation
      石垣島
    • Related Report
      2016 Annual Research Report
  • [Presentation] A Support Tool for Analyzing the 3D Motions of Sign Language and the Construction of a Morpheme Dictionary2016

    • Author(s)
      Y. Nagashima, K. Watanabe, M. Terauchi, N. Kato, T. Uchida, S. Umeda, T. Miyazaki, M. Azuma, and N. Hiruma
    • Organizer
      the 18th International Conference on Human-Computer Interaction(HCII2016)
    • Place of Presentation
      Toronto, Canada
    • Year and Date
      2016-07-20
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Eye Movements of Hearing Impaired Students in Self-practice to Learn How to Use Graphic Software2016

    • Author(s)
      T. Suzuki, M. Kobayashi, and Y. Nagashima
    • Organizer
      the 18th International Conference on Human-Computer Interaction(HCII2016)
    • Place of Presentation
      Toronto, Canada
    • Year and Date
      2016-07-07
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research
  • [Presentation] Study of Sign Language Expression of Medical Sign Language Words2016

    • Author(s)
      Mina Terauchi, Yuji Nagashima
    • Organizer
      The Ninth International Conference on Advances in Computer-Human Interactions
    • Place of Presentation
      Venice, Italy
    • Year and Date
      2016-04-24
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 聴覚障害学生に対する効率的な実技学習を支援する教材の設計2016

    • Author(s)
      鈴木 拓弥, 長嶋祐二
    • Organizer
      ヒューマンインタフェース学会研究会(SIG-ACI-17)
    • Place of Presentation
      京都工芸繊維大学(京都府)
    • Year and Date
      2016-03-28
    • Related Report
      2015 Annual Research Report
  • [Presentation] Provision of Emergency Information in Sign Language CG Animation over Integrated Broadcast-Broadband System2016

    • Author(s)
      Tsubasa Uchida, Shuichi Umeda, Makiko Azuma, Taro Miyazaki, Naoto Kato, Nobuyuki Hiruma, Seiki Inoue and Yuji Nagashima
    • Organizer
      IEEE International Symposium on Broadband Multimedia Systems and Broadcasting
    • Place of Presentation
      JAPAN,Nara
    • Related Report
      2016 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 3次元アニメーションによる医療用手話辞書の作成2016

    • Author(s)
      渡辺 桂子, 南川 真穂, 長嶋祐二,加藤 直人, 内田 翼, 梅田 修一, 宮崎 太郎, 東 真希子, 比留間 伸行
    • Organizer
      ヒューマンインタフェース学会, ヒューマンインタフェースシンポジウム2016
    • Place of Presentation
      東京
    • Related Report
      2016 Annual Research Report
  • [Presentation] NVSG要素モデルによる手話動作合成方法に関する検討2016

    • Author(s)
      久野翔利, 渡辺桂子,長嶋祐二, 加藤直人, 内田 翼, 宮崎太郎, 梅田修一, 東 真希子, 比留間伸行
    • Organizer
      電子情報通信学会 HCS研究会
    • Place of Presentation
      那覇
    • Related Report
      2016 Annual Research Report
  • [Presentation] 手話モーション部品の編集、 合成による手話アニメーション生成に関する検討2015

    • Author(s)
      井上誠喜,内田翼,加藤直人,宮崎太郎,梅田修一,東真希子,比留間伸行,長嶋祐二
    • Organizer
      電子情報通信学会HCGシンポジウム 2015
    • Place of Presentation
      富山国際会議場(富山県)
    • Year and Date
      2015-12-16
    • Related Report
      2015 Annual Research Report
  • [Presentation] 手話CGアニメーションの口型作成システム2015

    • Author(s)
      加藤直人,宮崎太郎,井上誠喜,内田翼,東真希子,梅田修一,比留間伸行,長嶋祐二
    • Organizer
      電子情報通信学会HCGシンポジウム
    • Place of Presentation
      富山国際会議場(富山県)
    • Year and Date
      2015-12-16
    • Related Report
      2015 Annual Research Report
  • [Presentation] 実技演習時の聴覚障害学生に対する字幕表示位置と内容理解度の相関について2015

    • Author(s)
      鈴木 拓弥, 長嶋 祐二
    • Organizer
      電子情報通信学会HCGシンポジウム
    • Place of Presentation
      富山国際会議場(富山県)
    • Year and Date
      2015-12-16
    • Related Report
      2015 Annual Research Report
  • [Presentation] 手話合成エディタの開発2015

    • Author(s)
      渡辺桂子, 長嶋祐二, 加藤直人, 宮﨑太郎, 井上誠喜, 梅田修一, 清水俊宏, 比留間伸行
    • Organizer
      ヒューマンインタフェース学会研究会(SIG-ACI-16)
    • Place of Presentation
      産総研臨海副都心センター別館バイオ(東京)
    • Year and Date
      2015-12-09
    • Related Report
      2015 Annual Research Report
  • [Presentation] 医療用手話単語収集方法の検討2015

    • Author(s)
      長嶋祐二, 渡辺桂子, 寺内美奈
    • Organizer
      計測自動制御学会 システム・情報部門学術講演会2015
    • Place of Presentation
      函館アリーナ(北海道)
    • Year and Date
      2015-11-18
    • Related Report
      2015 Annual Research Report
  • [Presentation] 緊急災害時における手話CGを用いた情報提示に関する検討2015

    • Author(s)
      内田 翼, 梅田 修一, 東 真希子, 宮﨑 太郎, 加藤 直人, 井上 誠喜, 比留間 伸行, 長嶋 祐二
    • Organizer
      ヒューマンインタフェース学会, ヒューマンインタフェースシンポジウム2015
    • Place of Presentation
      はこだて未来大学(北海道)
    • Year and Date
      2015-09-01
    • Related Report
      2015 Annual Research Report
  • [Presentation] 漢字手話/指文字判定を用いた日本語から日本手話への固有名詞の機械翻訳2015

    • Author(s)
      宮﨑太郎, 加藤直人, 内田翼, 東真希子, 梅田修一, 井上誠喜, 比留間伸行, 長嶋祐二
    • Organizer
      ヒューマンインタフェース学会, ヒューマンインタフェースシンポジウム2015
    • Place of Presentation
      はこだて未来大学(北海道)
    • Year and Date
      2015-09-01
    • Related Report
      2015 Annual Research Report
  • [Presentation] 聴覚障害者に対する字幕表示の内容理解度による評価2015

    • Author(s)
      鈴木 拓弥, 長嶋 祐二
    • Organizer
      ヒューマンインタフェース学会, ヒューマンインタフェースシンポジウム2015
    • Place of Presentation
      はこだて未来大学(北海道)
    • Year and Date
      2015-09-01
    • Related Report
      2015 Annual Research Report
  • [Presentation] Python Web サーバーとWebGL 版TVML プレイヤーによる簡易な日本語-手話CG 翻訳システム2015

    • Author(s)
      井上 誠喜, 加藤 直人, 宮﨑 太郎, 梅田 修一, 東 真希子, 内田 翼, 比留間 伸行, 長嶋 祐二
    • Organizer
      ヒューマンインタフェース学会, ヒューマンインタフェースシンポジウム2015
    • Place of Presentation
      はこだて未来大学(北海道)
    • Year and Date
      2015-09-01
    • Related Report
      2015 Annual Research Report
  • [Presentation] 手話形態素辞書作成のため情報入力支援システム構築2015

    • Author(s)
      渡辺 桂子, 長嶋 祐二, 加藤 直人, 宮崎 太郎, 井上 誠喜, 梅田 修一, 清水 俊宏, 比留間 伸行
    • Organizer
      ヒューマンインタフェース学会, ヒューマンインタフェースシンポジウム2015
    • Place of Presentation
      はこだて未来大学(北海道)
    • Year and Date
      2015-09-01
    • Related Report
      2015 Annual Research Report
  • [Presentation] Deep Learning とCG 距離画像を用いた指文字認識に関する一検討2015

    • Author(s)
      井上 誠喜, 加藤 直人, 宮﨑 太郎, 梅田 修一, 東 真希子, 内田 翼, 比留間 伸行, 長嶋 祐二
    • Organizer
      電気学会 知覚情報・次世代産業システム合同研究会
    • Place of Presentation
      岩手大学復興祈念銀河ホール(岩手県)
    • Year and Date
      2015-08-17
    • Related Report
      2015 Annual Research Report
  • [Presentation] 手話表情モーションデータの分析・編集に関する検討2015

    • Author(s)
      井上 誠喜,加藤 直人, 宮﨑 太郎, 梅田 修一, 東 真希子, 内田 翼, 比留間 伸行, 長嶋 祐二
    • Organizer
      電気学会 知覚情報研究会
    • Place of Presentation
      長崎県立大学シーボルト校(長崎県)
    • Year and Date
      2015-03-26
    • Related Report
      2014 Annual Research Report
  • [Presentation] WebGL を用いた手話アニメーション生成に関する検討2015

    • Author(s)
      井上 誠喜,加藤 直人, 宮﨑 太郎, 梅田 修一, 東 真希子, 内田 翼, 比留間 伸行, 長嶋 祐二
    • Organizer
      映像メディア学会 映像表現&コンピュータグラフィックス研究会
    • Place of Presentation
      北海道大学(北海道)
    • Year and Date
      2015-02-22
    • Related Report
      2014 Annual Research Report
  • [Presentation] オプション付き単語列を用いた手話アニメーション生成に関する一検討2014

    • Author(s)
      井上 誠喜, 加藤 直人, 宮崎 太郎, 梅田 修一, 東 真希子, 比留間 伸行, 長嶋 祐二
    • Organizer
      電子情報通信学会 HCGシンポジウム2014
    • Place of Presentation
      海峡メッセ下関 (山口県)
    • Year and Date
      2014-12-19
    • Related Report
      2014 Annual Research Report
  • [Presentation] 医療用手話単語に対する手話表現の検討2014

    • Author(s)
      渡辺 桂子, 寺内 美奈, 長嶋 祐二, 加藤 直人, 宮崎 太郎, 井上 誠喜, 梅田 修一, 清水 俊宏, 比留間 伸行
    • Organizer
      電子情報通信学会 HCGシンポジウム2014
    • Place of Presentation
      海峡メッセ下関 (山口県)
    • Year and Date
      2014-12-18
    • Related Report
      2014 Annual Research Report
  • [Presentation] 手話の階層的形態素記述モデルにおける非手指動作の記述法2014

    • Author(s)
      寺内 美奈, 渡辺 桂子, 長嶋 祐二, 加藤 直人, 宮崎 太郎, 井上 誠喜, 梅田 修一, 清水 俊宏, 比留間 伸行
    • Organizer
      電子情報通信学会 HCGシンポジウム2014
    • Place of Presentation
      海峡メッセ下関 (山口県)
    • Year and Date
      2014-12-18
    • Related Report
      2014 Annual Research Report
  • [Presentation] 顔表情を部分的に挿入した手話CG翻訳システム2014

    • Author(s)
      加藤 直人, 宮崎 太郎, 井上 誠喜, 梅田 修一, 東 真希子, 比留間 伸行, 長嶋 祐二
    • Organizer
      電子情報通信学会 HCGシンポジウム2014
    • Place of Presentation
      海峡メッセ下関 (山口県)
    • Year and Date
      2014-12-17
    • Related Report
      2014 Annual Research Report
  • [Presentation] 手話単語分析ツールの構築2014

    • Author(s)
      渡辺桂子, 寺内美奈, 長嶋祐二
    • Organizer
      HI学会 ヒューマンインタフェースシンポジウム2014
    • Place of Presentation
      京都工芸繊維大学(京都府)
    • Year and Date
      2014-09-12
    • Related Report
      2014 Annual Research Report
  • [Presentation] 単語の動作生成違いからみる使やす医療系手話単語2014

    • Author(s)
      寺内 美奈, 渡辺 桂子, 長嶋 祐二, 加藤 直人, 宮崎 太郎, 井上 誠喜, 梅田 修一, 清水 俊宏, 比留間 伸行
    • Organizer
      HI学会 ヒューマンインタフェースシンポジウム2014
    • Place of Presentation
      京都工芸繊維大学(京都府)
    • Year and Date
      2014-09-12
    • Related Report
      2014 Annual Research Report
  • [Presentation] Study into Methods of Describing Japanese Sign Language2014

    • Author(s)
      Keiko Watanabe, Yuji Nagashima, Mina Terauchi, Naoto Kato, Taro Miyazaki, Seiki Inoue, Shuichi Umeda, Toshihiro Shimizu, Nobuyuki Hiruma
    • Organizer
      the 16th International Conference on Human-Computer Interaction
    • Place of Presentation
      Crete(Greece)
    • Year and Date
      2014-06-25 – 2014-06-27
    • Related Report
      2014 Annual Research Report
  • [Presentation] Compilation of a Sign Language Database for Use in Medical Practice2014

    • Author(s)
      Mina Terauchi, Keiko Watanabe, Yuji Nagashima, Naoto Kato, Taro Miyazaki, Seiki Inoue, Shuichi Umeda, Toshihiro Shimizu, Nobuyuki Hiruma
    • Organizer
      the 16th International Conference on Human-Computer Interaction
    • Place of Presentation
      Crete(Greece)
    • Year and Date
      2014-06-25 – 2014-06-27
    • Related Report
      2014 Annual Research Report

URL: 

Published: 2014-04-04   Modified: 2018-03-22  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi