• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

多用途型日本手話言語データベース構築に関する研究

研究課題

研究課題/領域番号 17H06114
研究種目

基盤研究(S)

配分区分補助金
研究分野 言語学
研究機関工学院大学

研究代表者

長嶋 祐二  工学院大学, 情報学部(情報工学部), 教授 (50138137)

研究分担者 原 大介  豊田工業大学, 工学部, 教授 (00329822)
堀内 靖雄  千葉大学, 大学院工学研究院, 准教授 (30272347)
酒向 慎司  名古屋工業大学, 工学(系)研究科(研究院), 准教授 (30396791)
研究期間 (年度) 2017-05-31 – 2021-03-31
研究課題ステータス 完了 (2020年度)
配分額 *注記
141,960千円 (直接経費: 109,200千円、間接経費: 32,760千円)
2020年度: 17,030千円 (直接経費: 13,100千円、間接経費: 3,930千円)
2019年度: 68,900千円 (直接経費: 53,000千円、間接経費: 15,900千円)
2018年度: 27,820千円 (直接経費: 21,400千円、間接経費: 6,420千円)
2017年度: 28,210千円 (直接経費: 21,700千円、間接経費: 6,510千円)
キーワード手話 / データベース / 3次元動作 / アノテーション / 言語解析 / 手話認識 / 手話アニメーション
研究成果の概要

本研究では、男女2名による言語資料提供者により、高精度・高精細な3次元動作・映像・深度データによる6,359単語の手話単語データベースKoSignを構築した。さらに、世界初となる対話の高精細・高精度の3次元動作と映像データの収録も行った。収録対話は、より有意義なデータとするため、単語、表情などの抽出、翻訳などのアノテーションを行った。また、アノテーションを支援するためのツール(MAT)の構築も行った。
KoSignとMATは、手話研究推進を目的としてNII IDRより2021年5月25日に第1期分3,701語彙とアノテーション付きの3対話を公開した。

研究成果の学術的意義や社会的意義

本研究で最も重要な成果は、時空間解像度や質の異なる入力媒体からの全てのデータを同期した多次元的な手話の単語・対話データベースKoSignを構築したことである。KoSignは、3次元動作・映像・深度・赤外線画像データより構成され、言語資料、工学的研究資料とし計り知れない価値をもつデータとなる。特に、3次元動作による対話データは、未解明な手話のリズムに関する詳細な時空間解析を可能とするため、世界的に見ても貴重なデータとなり、公開が望まれている。
KoSignの公開で、日本の手話研究の発展に大きな貢献となると共に、新たな研究方法の発見など、社会的意義は高いと思われる。

評価記号
検証結果 (区分)

A

評価記号
評価結果 (区分)

A: 当初目標に向けて順調に研究が進展しており、期待どおりの成果が見込まれる

報告書

(10件)
  • 2021 研究進捗評価(検証) ( PDF )
  • 2020 実績報告書   研究成果報告書 ( PDF )
  • 2019 実績報告書   研究概要(研究進捗評価) ( PDF )   研究進捗評価(評価結果) ( PDF )
  • 2018 実績報告書
  • 2017 研究概要(採択時) ( PDF )   審査結果の所見 ( PDF )   実績報告書
  • 研究成果

    (47件)

すべて 2021 2020 2019 2018 2017 その他

すべて 雑誌論文 (15件) (うち国際共著 1件、 査読あり 14件、 オープンアクセス 4件) 学会発表 (29件) (うち国際学会 2件、 招待講演 3件) 図書 (1件) 備考 (2件)

  • [雑誌論文] Learning Three-dimensional Skeleton Data from Sign Language Video2020

    • 著者名/発表者名
      Brock Heike、Law Felix、Nakadai Kazuhiro、Nagashima Yuji
    • 雑誌名

      ACM Transactions on Intelligent Systems and Technology

      巻: 11 号: 3 ページ: 1-24

    • DOI

      10.1145/3377552

    • 関連する報告書
      2020 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Constructing a Highly Accurate Japanese Sign Language Motion Database Including Dialogue2020

    • 著者名/発表者名
      Nagashima Yuji、Watanabe Keiko、Hara Daisuke、Horiuchi Yasuo、Sako Shinji、Ichikawa Akira
    • 雑誌名

      Communications in Computer and Information Science

      巻: 1226 ページ: 76-81

    • DOI

      10.1007/978-3-030-50732-9_11

    • ISBN
      9783030507312, 9783030507329
    • 関連する報告書
      2020 実績報告書
    • 査読あり
  • [雑誌論文] 3D human pose estimation model using location-maps for distorted and disconnected images by a wearable omnidirectional camera2020

    • 著者名/発表者名
      Miura Teppei、Sako Shinji
    • 雑誌名

      IPSJ Transactions on Computer Vision and Applications

      巻: 12 号: 1 ページ: 1-17

    • DOI

      10.1186/s41074-020-00066-8

    • 関連する報告書
      2020 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Construction of a Japanese Sign Language Database with Various Data Types2019

    • 著者名/発表者名
      Watanabe Keiko、Nagashima Yuji、Hara Daisuke、Horiuchi Yasuo、Sako Shinji、Ichikawa Akira
    • 雑誌名

      Communications in Computer and Information Science

      巻: 1032 ページ: 317-322

    • DOI

      10.1007/978-3-030-23522-2_41

    • ISBN
      9783030235215, 9783030235222
    • 関連する報告書
      2019 実績報告書
    • 査読あり
  • [雑誌論文] Constructing a Japanese Sign Language Database and Developing Its Viewer2019

    • 著者名/発表者名
      Nagashima Yuji
    • 雑誌名

      ACM ISBN 978-1-4503-6232-0/19/06

      巻: 印刷中 ページ: 321-322

    • DOI

      10.1145/3316782.3322738

    • 関連する報告書
      2019 実績報告書 2018 実績報告書
    • 査読あり
  • [雑誌論文] 学術手話通訳における原語借用の分析2019

    • 著者名/発表者名
      中野聡子,後藤睦,原大介,金澤貴之,細井裕子,川鶴和子,楠敬太,望月直人
    • 雑誌名

      日本通訳学会 通訳研究

      巻: 20 ページ: 141-158

    • 関連する報告書
      2019 実績報告書
    • 査読あり
  • [雑誌論文] Deep CNN-Based Recognition of JSL Finger Spelling2019

    • 著者名/発表者名
      Nguen Nam Tu、Sako Shinji、Kwolek Bogdan
    • 雑誌名

      International Conference on Hybrid Artificial Intelligence Systems

      巻: LNAI 11734 ページ: 602-613

    • DOI

      10.1007/978-3-030-29859-3_51

    • ISBN
      9783030298586, 9783030298593
    • 関連する報告書
      2019 実績報告書
    • 査読あり
  • [雑誌論文] 心的負担が軽い「対話のことば」の構造2018

    • 著者名/発表者名
      市川 熹、堀内 靖雄、長嶋 祐二
    • 雑誌名

      ヒューマンインタフェース学会論文誌

      巻: 20 号: 2 ページ: 191-204

    • DOI

      10.11184/his.20.2_191

    • NAID

      130006744173

    • ISSN
      1344-7262, 2186-8271
    • 年月日
      2018-05-25
    • 関連する報告書
      2018 実績報告書
    • 査読あり
  • [雑誌論文] 聴覚障害学生向け触覚情報提示システム SZFOX の有効性について2018

    • 著者名/発表者名
      鈴木 拓弥、小林 真、長嶋 祐二
    • 雑誌名

      ヒューマンインタフェース学会論文誌

      巻: 20 号: 2 ページ: 183-190

    • DOI

      10.11184/his.20.2_183

    • NAID

      130006744167

    • ISSN
      1344-7262, 2186-8271
    • 年月日
      2018-05-25
    • 関連する報告書
      2018 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] 聴覚障害学生向け実技演習を支援する触覚情報提示システムSZCATの効果に関する基礎的研究2018

    • 著者名/発表者名
      鈴木拓弥, 小林真, 長嶋祐二
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J101-D 号: 3 ページ: 560-568

    • DOI

      10.14923/transinfj.2017PDP0034

    • ISSN
      1880-4535, 1881-0225
    • 年月日
      2018-03-01
    • 関連する報告書
      2017 実績報告書
    • 査読あり
  • [雑誌論文] 聴覚障害学生向け実技演習における実演履歴提示ソフトウェアSZKISSの開発と有効性の検証2018

    • 著者名/発表者名
      鈴木拓弥, 長嶋祐二
    • 雑誌名

      電子情報通信学会論文誌D 情報・システム

      巻: J101-D 号: 2 ページ: 359-368

    • DOI

      10.14923/transinfj.2017HAP0013

    • ISSN
      1880-4535, 1881-0225
    • 年月日
      2018-02-01
    • 関連する報告書
      2017 実績報告書
    • 査読あり
  • [雑誌論文] Construction of Multi-purpose Japanese Sign Language Database2018

    • 著者名/発表者名
      Nagashima Yuji
    • 雑誌名

      Advances in Intelligent Systems and Computing 876、Springer

      巻: 876 ページ: 595-599

    • DOI

      10.1007/978-3-030-02053-8_91

    • ISBN
      9783030020521, 9783030020538
    • 関連する報告書
      2018 実績報告書
    • 査読あり
  • [雑誌論文] Medical Dictionary Using Sign Language Animation for Hearing-Impaired Persons2018

    • 著者名/発表者名
      Watanabe Keiko、Nagashima Yuji
    • 雑誌名

      Part of the Communications in Computer and Information Science book series (CCIS, volume 851)、 Springer

      巻: 851 ページ: 108-113

    • DOI

      10.1007/978-3-319-92279-9_15

    • ISBN
      9783319922782, 9783319922799
    • 関連する報告書
      2018 実績報告書
    • 査読あり
  • [雑誌論文] 手話コミュニケーションのための情報保障技術2018

    • 著者名/発表者名
      長嶋祐二, 加藤直人, 山内結子, 河野純大
    • 雑誌名

      電子情報通信学誌

      巻: 101 ページ: 66-72

    • NAID

      40021440858

    • 関連する報告書
      2017 実績報告書
  • [雑誌論文] Vibration Ring Device Which Supports Deaf Students to Learn How to Use Illustrator2017

    • 著者名/発表者名
      Suzuki Takuya、Kobayashi Makoto、Nagashima Yuji
    • 雑誌名

      HCI International 2017

      巻: CCIS713 ページ: 192-197

    • DOI

      10.1007/978-3-319-58750-9_27

    • ISBN
      9783319587493, 9783319587509
    • 関連する報告書
      2017 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] コミュニケーション障がい領域における学際的研究及び支援技術開発2021

    • 著者名/発表者名
      長嶋祐二
    • 学会等名
      電子情報通信学会, 福祉情報工学研究会
    • 関連する報告書
      2020 実績報告書
    • 招待講演
  • [学会発表] 科研費プロジェクト(最終年度)の報告2021

    • 著者名/発表者名
      長嶋祐二
    • 学会等名
      電子情報通信学会リアルタイムコミュニケーション言語研究会 第16回研究会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 日本手話の音素配列論―音節の適格性・不適格性―2021

    • 著者名/発表者名
      原大介
    • 学会等名
      電子情報通信学会リアルタイムコミュニケーション言語研究会 第16回研究会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 日本手話における手の位置の音素に関するモーションキャプチャによる分析2021

    • 著者名/発表者名
      西牧樹生, 堀内靖雄, 原大介, 黒岩眞吾,
    • 学会等名
      人工知能学会,第91回言語・音声理解と対話処理研究会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 手話認識のための訓練用データ生成実験2020

    • 著者名/発表者名
      梶山岳士, 遠藤伶, 佐野 雅規, 河合 吉彦, 長嶋祐二
    • 学会等名
      映像メディア学会 創立70周年記念大会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] Extrametricality of the initial location in the type-III syllable of Japanese Sign Language2020

    • 著者名/発表者名
      Daisuke Hara, Makoto Miwa, Ichiro Yuhara
    • 学会等名
      28th Japanese/Korean Linguistics Virtual Conference (JK28)
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 日本手話の音素配列論―音節の適格性・不適格性―2020

    • 著者名/発表者名
      原大介
    • 学会等名
      手話言語と音声言語に関する民博フェスタ2020
    • 関連する報告書
      2020 実績報告書
  • [学会発表] Fingerspelling recognition using synthetic images and deep transfer learning2020

    • 著者名/発表者名
      Nam Nguyen Tu, Shinji Sako, Bogdan Kwolek
    • 学会等名
      The 13th International Conference on Machine Vision (ICMV 2020)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] 全天球カメラを用いた3D ポーズ推定手話認識への応用に向けて2020

    • 著者名/発表者名
      三浦哲平, 酒向慎司
    • 学会等名
      電子情報通信学会第107回福祉情報工学研究会
    • 関連する報告書
      2020 実績報告書
  • [学会発表] コミュニケーション支援技術における学際的な研究2020

    • 著者名/発表者名
      長嶋祐二
    • 学会等名
      電子情報通信学会, 福祉情報工学研究会(WIT)
    • 関連する報告書
      2019 実績報告書
    • 招待講演
  • [学会発表] 手話工学研究と3次元動作データベース構築2020

    • 著者名/発表者名
      長嶋祐二
    • 学会等名
      人工知能学会, 言語・音声理解と対話処理研究会(第88回)
    • 関連する報告書
      2019 実績報告書
    • 招待講演
  • [学会発表] コーディングと動画を併用した日本手話音節の適格性予測2020

    • 著者名/発表者名
      高藤朋史, 三輪誠, 佐々木裕, 原大介
    • 学会等名
      言語処理学会第26回年次大会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 日本手話対話のポーズと話者交替の分析2020

    • 著者名/発表者名
      堀内靖雄,有本泰子,黒岩眞吾
    • 学会等名
      工知能学会研究会資料
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 手話の語彙構造・文法解明に供する3D超高精度DBの開発2019

    • 著者名/発表者名
      菊池 英明, 沈 睿, 市川 熹, 岡本 明, 長嶋祐二, 藤本浩志, 引田秋生
    • 学会等名
      電子情報通信学会, HCGシンポジウム
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 「一体的リズム」と「分析的リズム」 -- 実時間対話機能に関する詩論 --2019

    • 著者名/発表者名
      市川 熹, 長嶋祐二, 堀内靖雄, 原大介
    • 学会等名
      電子情報通信学会, ヒューマンコミュニケーション基礎研究会(HCS)
    • 関連する報告書
      2019 実績報告書
  • [学会発表] The phonotactics of type-III syllables of Japanese Sign Language2019

    • 著者名/発表者名
      Hara Daisuke, Miwa Makoto
    • 学会等名
      heoretical Issues in Sign Language Research 13 (TISLR13)
    • 関連する報告書
      2019 実績報告書
  • [学会発表] The Well-formedness and the Ill-formedness of JSL Type-III Syllable2019

    • 著者名/発表者名
      Hara Daisuke, Miwa Makoto
    • 学会等名
      The Chicago Linguistic Society 55th Annual Meeting
    • 関連する報告書
      2019 実績報告書
  • [学会発表] Discussion of a Japanese sign language database and its annotation systems with consideration for its use in various areas2019

    • 著者名/発表者名
      Shinji Sako1, Yuji Nagashima, Daisuke Hara, Yasuo Horiuchi, Keiko Watanabe, Ritsuko Kikusawa, Naoto Kato, Akira Ichikawa
    • 学会等名
      LingColonge 2019
    • 関連する報告書
      2019 実績報告書
  • [学会発表] モーションキャプチャデータを用いた日本手話の非手指信号の基本要素抽出の試み2019

    • 著者名/発表者名
      酒向 慎司, 安江 謙太
    • 学会等名
      電子情報通信学会, 福祉情報工学研究会(WIT)
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 3次元CGモデルとDeep CNNによる指文字認識2019

    • 著者名/発表者名
      グエン トゥ ナム, 酒向 慎司, ボグダン クォーレック
    • 学会等名
      電子情報通信学会, 福祉情報工学研究会(PRMU)
    • 関連する報告書
      2019 実績報告書
  • [学会発表] ウェアラブルな全方位カメラの画像を入力とした3Dポーズ推定 ~ 手話の認識と翻訳に向けて2019

    • 著者名/発表者名
      三浦 哲平, 酒向 慎司
    • 学会等名
      電子情報通信学会, パターン認識・メディア理解研究会(PRMU)
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 日本手話の多用途・3次元高精度データベースの開発2019

    • 著者名/発表者名
      長嶋祐二, 酒向慎司, 渡辺桂子, 原大介 , 堀内靖雄, 市川熹
    • 学会等名
      電子情報通信学会、福祉情報工学研究会
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Constructing a Japanese Sign Language Multi-Dimensional Database2018

    • 著者名/発表者名
      Yuji NAGASSHIMA, Daisuke HARA, Shinji SAKO et al.
    • 学会等名
      The 7th Meeting of Signed and Spoken Language Linguistics
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 多様な研究分野に利用可能な超高精細・高精度 手話言語データベースの開発2018

    • 著者名/発表者名
      長嶋祐二, 原大介 , 堀内靖雄, 酒向慎司, 渡辺桂子, 菊澤律子, 加藤直人, 市川熹
    • 学会等名
      言語資源活用ワークショップ2018
    • 関連する報告書
      2018 実績報告書
  • [学会発表] 手話の語彙構造・文法解明に供する3D超高精度DBの開発2018

    • 著者名/発表者名
      長嶋祐二, 酒向慎司, 渡辺桂子, 原大介 , 堀内靖雄, 市川熹
    • 学会等名
      日本音響学会2018秋季研究発表会
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Medical Sign Language Dictionary with 3D Animation Viewer2017

    • 著者名/発表者名
      Yuji Nagashima, Keiko Watanabe
    • 学会等名
      The Second International Conference on Advances in Computation, Communications and Services
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] 3次元アニメーションによる手話手型一覧の作成2017

    • 著者名/発表者名
      渡辺桂子, 長嶋祐二, 加藤直人, 内田翼, 宮崎太郎, 東真希子, 梅田修一, 山内結子, 住吉英樹
    • 学会等名
      HI学会, ヒューマンインタフェースシンポジウム2017
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 手話動作生成のためのBVHファイル編集2017

    • 著者名/発表者名
      久野翔利, 渡辺桂子, 長嶋祐二, 加藤直人, 内田 翼, 宮崎太郎, 東 真希子, 梅田修一, 山内結子, 住吉英樹
    • 学会等名
      電子情報通信学会 福祉情報工学研究会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 気象情報を対象とした手話CG翻訳システムの改良と評価2017

    • 著者名/発表者名
      加藤直人, 宮崎太郎, 井上誠喜, 内田 翼, 東 真希子, 梅田修一, 山内結子, 住吉英樹, 比留間伸行, 長嶋祐二
    • 学会等名
      電子情報通信学会 福祉情報工学研究会
    • 関連する報告書
      2017 実績報告書
  • [図書] 音声コミュニケーションと障がい者2021

    • 著者名/発表者名
      市川熹、長嶋祐二(編著)
    • 総ページ数
      244
    • 出版者
      コロナ社
    • ISBN
      9784339013429
    • 関連する報告書
      2020 実績報告書
  • [備考] 多用途型日本手話言語データベース : 科学研究費補助金 基盤研究(S)

    • URL

      http://www.ns.kogakuin.ac.jp/~wwc1015/database.html

    • 関連する報告書
      2019 実績報告書 2018 実績報告書
  • [備考] 研究課題/多用途型日本手話言語データベース

    • URL

      http://www.ns.kogakuin.ac.jp/~wwc1015/

    • 関連する報告書
      2017 実績報告書

URL: 

公開日: 2017-06-01   更新日: 2023-10-16  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi