A Study on Camera Control for Remote PC Captioning in the lecture for Hearing Impaired

• Project/Area Number: 19700470
• Research Category: Grant-in-Aid for Young Scientists (B)
• Allocation Type: Single-year Grants
• Research Field: Rehabilitation science/Welfare engineering
• Research Institution: Nagoya University
• Principal Investigator: TAKEUCHI Yoshinori Nagoya University, 情報連携統括本部・情報戦略室, 准教授 (60324464)
• Project Period (FY): 2007 – 2008
• Project Status: Completed (Fiscal Year 2008)
• Budget Amount: ¥2,400,000 (Direct Cost: ¥2,100,000、Indirect Cost: ¥300,000); Fiscal Year 2008: ¥1,300,000 (Direct Cost: ¥1,000,000、Indirect Cost: ¥300,000); Fiscal Year 2007: ¥1,100,000 (Direct Cost: ¥1,100,000)
• Keywords: 遠隔パソコン要約筆記 / 指示発話抽出 / 指示動作抽出 / 情報保障 / 情報システム / 福祉情報工学 / 指示語発話抽出 / 情報工学 / 要約筆記 / 指示発話 / 指示対象 / 指示動作

Research Abstract

本研究では,講師音声からの指示語発話抽出手法として,音声認識を利用した手法を提案し,さらに,指示語抽出結果と指示動作抽出結果の統合手法も提案する.この統合手法は,指示語発話と示動作の時間の関連性を利用しているそして,実際に収録した講義データに対して,指示語・指示動作抽出処理行い,さらに,統合処理を行った結果,再現率約91%,適合率約71%を得ることができた.

Research Products

• [Journal Article] Extracting Pointing Object with Demonstrative Speech Phrase for Remote Transcription in Lecture (2008)
  • Author(s): Y. Takeuchi, K. Saito, A. Ito, N. Ohnishi, S. Iizuka, S. Nakajima
  • Journal Title: Proc. of Int. Conf. on Computer Helping People with Special Needs 1巻 Pages: 624-631
  • Peer Reviewed
• [Journal Article] A Study on Demonstrative Words Extraction in Instructor Utterance on Communication Support for Hearing Impaired Persons (2008)
  • Author(s): A. Ito, K. Saito, Y. Takeuchi, N. Ohnishi, S. Iizuka, S. Nakajima
  • Journal Title: Proc. of Int. Conf. on Computer Helping People with Special Needs 1巻 Pages: 632-639
  • Peer Reviewed
• [Journal Article] Camera Control for Remote Transcription System (2008)
  • Author(s): Y. Takeuchi, K. Saito, N. Ohnishi, S. Iizuka, S. Nakajima
  • Journal Title: Proc. of the 10th IASTED Int. Conf. Computer Graphics and Imaging 1巻 Pages: 88-93
  • Peer Reviewed
• [Journal Article] Extracting Pointing Object with Demonstrative Speech Phrase for Remote Transcription in Lecture (2008)
  • Author(s): Y. Takeuchi
  • Journal Title: Proc. of the International Conference on Computers Helping People with Special Needs 1 Pages: 624-631
  • Peer Reviewed
• [Journal Article] A Study on Demonstrative Words Extraction I Instructor Utterance on Communication Support for Hearing Impaired Persons (2008)
  • Author(s): A. Ito
  • Journal Title: Proc. of the International Conference on Computers Helping People with Special Needs 1 Pages: 632-639
  • Peer Reviewed
• [Journal Article] CAMERA CONTROL FOR REMOTE TRANSCRIPTION SYSTEM (2008)
  • Author(s): Yoshinori Takeuchi
  • Journal Title: Proceedings of the Tenth IASTED International Conference COMPUTER GRAPHICS AND IMAGING Pages: 88-93
  • Peer Reviewed
• [Presentation] 遠隔パソコン要約筆記のための指示語と指示動作との統合手法の検討 (2009)
  • Author(s): 伊藤綾鹿
  • Organizer: 電子情報通信学会福祉情報工学研究会
  • Place of Presentation: 松山
  • Year and Date: 2009-02-20
• [Presentation] 聴覚障害者向け情報保障のための講師発話内指示語および指示動作抽出手法の検討 (2008)
  • Author(s): 伊藤綾鹿
  • Organizer: ヒューマンインタフェース学会
  • Place of Presentation: 東京
  • Year and Date: 2008-12-03
• [Presentation] 遠隔パソコン要約筆記のための指示動作の検出 (2008)
  • Author(s): 伊藤綾鹿
  • Organizer: 画像電子学会年次大会
  • Place of Presentation: 東京
  • Year and Date: 2008-06-20
• [Presentation] 聴覚障がい者向け情報保障のための講師発話からの指示語抽出法の検討 (2008)
  • Author(s): 伊藤綾鹿
  • Organizer: 情報処理学会全国大会
  • Place of Presentation: つくば
  • Year and Date: 2008-03-15
• [Presentation] 聴覚障がい者向け情報保障のための講師発話からの指示語抽出手法の検討 (2008)
  • Author(s): 伊藤 綾鹿
  • Organizer: 情報処理学会 第70回全国大会
  • Place of Presentation: 筑波大学
  • Year and Date: 2008-03-15
• [Presentation] 遠隔PC要約筆記のための指示発話と動作の関連性分析 (2008)
  • Author(s): 斉藤健
  • Organizer: 電子情報通信学会福祉情報工学研究会
  • Place of Presentation: 松江
  • Year and Date: 2008-01-25
• [Presentation] 遠隔PC要約筆記のための指示発話と動作の関連性分析 (2008)
  • Author(s): 斉藤 健
  • Organizer: 電子情報通信学会技術研究報告(思考と言語)
  • Place of Presentation: 島根大学
  • Year and Date: 2008-01-25