• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

Study of Analysis and Description of Visual Communication Based on the Real World Mapping Models

Research Project

Project/Area Number 24500644
Research Category

Grant-in-Aid for Scientific Research (C)

Allocation TypeMulti-year Fund
Section一般
Research Field Rehabilitation science/Welfare engineering
Research InstitutionThe Hyogo Institute of Assistive Technology (2014-2015)
Kogakuin University (2013)
Kyoto Institute of Technology (2012)

Principal Investigator

Nakazono Kaoru  兵庫県立福祉のまちづくり研究所, その他部局等, 研究員 (60531267)

Co-Investigator(Kenkyū-buntansha) NAGASHIMA Yuji  工学院大学, 情報工学科, 教授 (50138137)
Project Period (FY) 2012-04-01 – 2016-03-31
Project Status Completed (Fiscal Year 2015)
Budget Amount *help
¥5,330,000 (Direct Cost: ¥4,100,000、Indirect Cost: ¥1,230,000)
Fiscal Year 2014: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000)
Fiscal Year 2013: ¥1,560,000 (Direct Cost: ¥1,200,000、Indirect Cost: ¥360,000)
Fiscal Year 2012: ¥2,470,000 (Direct Cost: ¥1,900,000、Indirect Cost: ¥570,000)
Keywordsヒューマンコンピュータインタラクション / ヒューマンコミュニケーション / ビジュアルコミュニケーション / 福祉情報工学 / 手話 / ピクトグラム
Outline of Final Research Achievements

Deaf people use a visual language (sign language) and there are some aspects of their expressions that can be implemented on the design of an animated movie. We studied the simple recognizable design method for pictograms which is imported from the expression manner using visual mapping technique specific to sign language. Furthermore, we constructed layered description model of visual expression from macroscopic to microscopic layer.
First, we extracted sign language specific expression manners from analysis of sign conversation video. Based on these manners, very simple moving pictograms which expresses abstract notions were designed and intelligibility of them comparing to the static pictograms was confirmed by evaluation experiments. Then, we tried to generate animated short movie using TVML, TV Program Language. Furthermore, we studied technique to simplify troublesome TVML programming works by using framework of multi layer animated movie description technique.

Report

(5 results)
  • 2015 Annual Research Report   Final Research Report ( PDF )
  • 2014 Research-status Report
  • 2013 Research-status Report
  • 2012 Research-status Report
  • Research Products

    (14 results)

All 2016 2015 2014 2013

All Journal Article (3 results) (of which Peer Reviewed: 3 results,  Open Access: 1 results,  Acknowledgement Compliant: 2 results) Presentation (11 results) (of which Int'l Joint Research: 1 results)

  • [Journal Article] Sign Language Expression Research of Medical Words and Construction of the Word Database2016

    • Author(s)
      渡辺桂子, 長嶋祐二
    • Journal Title

      電子情報通信学会論文誌D 情報・システム

      Volume: J99-D Issue: 1 Pages: 76-89

    • DOI

      10.14923/transinfj.2015HAP0027

    • ISSN
      1880-4535, 1881-0225
    • Year and Date
      2016-01-01
    • Related Report
      2015 Annual Research Report
    • Peer Reviewed / Open Access / Acknowledgement Compliant
  • [Journal Article] 動画ピクトグラムを利用した駅でのコミュニケーション支援システム2014

    • Author(s)
      中園薫,角田麻里,長嶋祐二
    • Journal Title

      観光と情報

      Volume: 10 Pages: 87-100

    • NAID

      40020251546

    • Related Report
      2014 Research-status Report
    • Peer Reviewed / Acknowledgement Compliant
  • [Journal Article] ろう者による視覚表現手法を応用したピクトグラムデザインの試み2013

    • Author(s)
      中園 薫,角田麻里,神田和幸,長嶋祐二
    • Journal Title

      ヒューマンインタフェース

      Volume: 15 Pages: 73-82

    • NAID

      130007671483

    • Related Report
      2013 Research-status Report
    • Peer Reviewed
  • [Presentation] 医療用手話単語収集方法の検討2015

    • Author(s)
      長嶋祐二, 渡辺桂子, 寺内美奈
    • Organizer
      計測自動制御学会 システム・情報部門 学術講演会2015
    • Place of Presentation
      函館アリーナ,函館市
    • Year and Date
      2015-11-18
    • Related Report
      2015 Annual Research Report
  • [Presentation] A Study on How to Express Non-manual Markers in the Electronic Dictionary of Japanese Sign Language2015

    • Author(s)
      M. Terauchi, Y. Nagashima
    • Organizer
      15th IFIP TC 13 International Conference
    • Place of Presentation
      Bamberg, Germany
    • Year and Date
      2015-09-14
    • Related Report
      2015 Annual Research Report
    • Int'l Joint Research
  • [Presentation] 手話形態素辞書作成のための情報入力支援システムの構築2015

    • Author(s)
      渡辺桂子, 長嶋祐二, 加藤直人, 宮崎太郎, 井上誠喜, 梅田修一, 清水俊宏, 比留間伸
    • Organizer
      ヒューマンインタフェースシンポジウム 2015
    • Place of Presentation
      はこだて未来大学, 函館市
    • Year and Date
      2015-09-01
    • Related Report
      2015 Annual Research Report
  • [Presentation] 医療用手話単語に対する手話表現の検討2014

    • Author(s)
      渡辺 桂子, 寺内 美奈, 長嶋 祐二, 加藤 直人, 宮崎 太郎, 井上 誠喜, 梅田 修一, 清水 俊宏, 比留間 伸行
    • Organizer
      電子情報通信学会 HCGシンポジウム2014
    • Place of Presentation
      下関
    • Year and Date
      2014-12-17 – 2014-12-19
    • Related Report
      2014 Research-status Report
  • [Presentation] 手話の階層的形態素記述モデルにおける非手指動作の記述法2014

    • Author(s)
      寺内 美奈, 渡辺 桂子, 長嶋 祐二, 加藤 直人, 宮崎 太郎, 井上 誠喜, 梅田 修一, 清水 俊宏, 比留間 伸行
    • Organizer
      電子情報通信学会 HCGシンポジウム2014
    • Place of Presentation
      下関
    • Year and Date
      2014-12-17 – 2014-12-19
    • Related Report
      2014 Research-status Report
  • [Presentation] Study into Methods of Describing Japanese Sign Language2014

    • Author(s)
      Keiko Watanabe, Yuji Nagashima, Mina Terauchi, Naoto Kato, Taro Miyazaki, Seiki Inoue, Shuichi Umeda, Toshihiro Shimizu and Nobuyuki Hiruma
    • Organizer
      the 16th International Conference on Human-Computer Interaction
    • Place of Presentation
      Crete, Greece
    • Year and Date
      2014-06-22 – 2014-06-27
    • Related Report
      2014 Research-status Report
  • [Presentation] コミュニケーション支援システムVUTEの旅行会話コーパスによる評価2013

    • Author(s)
      中園薫,角田麻里,長嶋祐二
    • Organizer
      観光情報学会研究会
    • Place of Presentation
      熊本大学
    • Related Report
      2013 Research-status Report
  • [Presentation] NVSG形態表記のための日本手話語彙分類法2013

    • Author(s)
      寺内美奈, 渡辺桂子, 渡辺久子, 長嶋祐二
    • Organizer
      情報処理学会NL研究会
    • Place of Presentation
      山梨大学
    • Related Report
      2013 Research-status Report
  • [Presentation] 手話単語のカテゴリ分類を考慮した階層的形態素記述法2013

    • Author(s)
      渡辺桂子, 寺内美奈, 渡辺久子, 長嶋祐二, 加藤直人, 宮﨑太郎, 井上誠喜, 梅田修一, 清水俊宏, 比留間伸行
    • Organizer
      電子情報通信学会HCGシンポジウム2013
    • Place of Presentation
      松山市総合コミュニティセンター
    • Related Report
      2013 Research-status Report
  • [Presentation] ろう者が使用する「対照的表現」―逆接的「手話」とその頻度―2013

    • Author(s)
      角田 麻里, 中園 薫, 神田 和幸, 長嶋 祐二
    • Organizer
      ヒューマンインターフェース学会第96回研究会
    • Place of Presentation
      東京農工大
    • Related Report
      2012 Research-status Report
  • [Presentation] 視線分析を用いたピクトグラムによるユーザインタフェースの評価2013

    • Author(s)
      中園 薫, 角田 麻里,長嶋 祐二
    • Organizer
      ヒューマンインターフェース学会第96回研究会
    • Place of Presentation
      東京農工大
    • Related Report
      2012 Research-status Report

URL: 

Published: 2013-05-31   Modified: 2019-07-29  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi