Studies of spoken language processings for teaching/learning support on elementary and secondary educations

• Project/Area Number: 24500225
• Research Category: Grant-in-Aid for Scientific Research (C)
• Allocation Type: Multi-year Fund
• Section: 一般
• Research Field: Perception information processing/Intelligent robotics
• Research Institution: Ryukoku University
• Principal Investigator: HIROAKI NANJO 龍谷大学, 理工学部, 助教 (50388162)
• Co-Investigator(Kenkyū-buntansha): NISHIZAKI Hiromitsu 山梨大学, 総合研究部, 助教 (40362082)
• Project Period (FY): 2012-04-01 – 2015-03-31
• Project Status: Completed (Fiscal Year 2014)
• Budget Amount: ¥5,330,000 (Direct Cost: ¥4,100,000、Indirect Cost: ¥1,230,000); Fiscal Year 2014: ¥1,430,000 (Direct Cost: ¥1,100,000、Indirect Cost: ¥330,000); Fiscal Year 2013: ¥1,950,000 (Direct Cost: ¥1,500,000、Indirect Cost: ¥450,000); Fiscal Year 2012: ¥1,950,000 (Direct Cost: ¥1,500,000、Indirect Cost: ¥450,000)
• Keywords: 音声言語情報処理 / 音声認識 / 初等中等教育 / 音声言語処理 / 教育支援 / 学習支援

Outline of Final Research Achievements

Fundamental studies for learning/teaching-support systems have been investigated. We have tried to realize basic technologies which enable both teachers and students to get lecture recording materials (e.g. movies) on elementary and secondary education schools. We have achieved several results as follows.
1) Elementary school lecture database (corpus) were developed. Lectures were recorded and several information including transcriptions were annotated. 2) Automatic speech recognition techniques were investigated and significant knowledges were obtained. 3) Information retrieval (spoken document retrieval) techniques were investigated and significant knowledges were obtained.

Research Products

• [Journal Article] 講演音声ドキュメント検索のための擬似適合性フィードバック (2014)
  • Author(s): 西尾友宏，南條浩輝，吉見毅彦
  • Journal Title: 情報処理学会論文誌 Volume: Vol.55, No.5
  • NAID: 110009770531
  • Peer Reviewed / Acknowledgement Compliant
• [Journal Article] Spoken Term Detection Using Phoneme Transition Network from Multiple Speech Recognizers' Outputs (2013)
  • Author(s): Satoshi Natori, Yuto Furuya, Hiromitsu Nishizaki, Yoshihiro Sekiguchi
  • Journal Title: Journal of Information Processing Volume: Vol.21, No.2, Pages: 176-185
  • NAID: 130003366960
  • Peer Reviewed
• [Journal Article] Entropy-based False Detection Filtering in Spoken Term Detection Tasks (2013)
  • Author(s): Satoshi Natori, Yuto Furuya, Hiromitsu Nishizaki, Yoshihiro Sekiguchi
  • Journal Title: Proceedings of the APSIPA2013 Volume: - Pages: 1-7
  • Peer Reviewed
• [Journal Article] Spoken Document Retrieval Experiments for SpokenDoc-2 at Ryukoku University (RYSDT) (2013)
  • Author(s): Hiroaki NANJO, Tomohiro NISHIO, Takehiko YOSHIMI
  • Journal Title: In Proceedings of NTCIR-10 Workshop Meeting Volume: - Pages: 612-617
• [Journal Article] STD and SCR Techniques and Their Evaluations on the NTCIR-10 SpokenDoc-2 Task (2013)
  • Author(s): Yuto Furuya, Daiki Nakagomi, Satoshi Natori, Hiromitsu Nishizaki, Yoshihiro Sekiguchi
  • Journal Title: In Proceedings of NTCIR-10 Workshop Meeting Volume: - Pages: 626-633
• [Journal Article] 音声認識エンジンJuliusの認識結果を用いた拡張ROVERの評価 (2013)
  • Author(s): 古谷遼，南條浩輝
  • Journal Title: 日本音響学会2013年春季研究発表会講演論文集 Volume: 2-9-2 Pages: 37-40
• [Journal Article] 電子ノート作成支援システム上での音声中の検索語検出技術の検証 (2013)
  • Author(s): 米倉千冬，太田晃平，西崎博光，関口芳廣
  • Journal Title: 日本音響学会2013年春季研究発表会講演論文集 Volume: 3-P-33a Pages: 243-244
• [Journal Article] 音声中の検索語検出のためのテストコレクションの構築と分析 (2013)
  • Author(s): 伊藤慶明, 西崎博光, 中川聖一, 秋葉友良, 河原達也, 胡新輝, 南條浩輝, 松井知子, 山下洋一, 相川清明
  • Journal Title: 情報処理学会論文誌 Volume: Vol. 54, No. 2 Pages: 471-483
  • NAID: 110009537042
  • Peer Reviewed
• [Journal Article] Introduction of False Detection Control Parameters in Spoken Term Detection (2012)
  • Author(s): Yuto Furuya, Satoshi Natori, Hiromitsu Nishizaki, and Yoshihiro Sekiguchi
  • Journal Title: Proceedings of the Asia-Pacific Signal and Information Processing Association Annual Summit and Conference (APSIPA ASC 2012) Volume: CD-ROM
  • Peer Reviewed
• [Journal Article] 講義で利用できる音声と画像を融合した電子ノート作成支援システムの開発 (2012)
  • Author(s): 太田晃平，西崎博光，関口芳廣
  • Journal Title: 日本教育工学会研究報告集 Volume: JSET12-4 Pages: 61-66
  • NAID: 10031117181
• [Journal Article] 講演音声ドキュメント検索におけるクエリ拡張の検討 (2012)
  • Author(s): 西尾友宏，南條浩輝，吉見毅彦
  • Journal Title: 日本音響学会2012年秋季研究発表会講演論文集 Volume: 3-1-4 Pages: 101-104
• [Journal Article] 初等中等教育の授業音声認識のための子供向け表現の抽出と言語モデル学習 (2012)
  • Author(s): 南條浩輝，久木一平，和田祐樹
  • Journal Title: 日本音響学会2012年秋季研究発表会講演論文集 Volume: 3-P-19 Pages: 171-172
• [Journal Article] STDのための音素遷移ネットワークのエントロピーによる分析 (2012)
  • Author(s): 古屋裕斗，西崎博光，関口芳廣
  • Journal Title: 日本音響学会2012年秋季研究発表会講演論文集 Volume: 3-P-31 Pages: 203-204
• [Presentation] 初等教育における授業音声の収集と音声認識の基礎的検討 (2015)
  • Author(s): 南條浩輝，西崎博光
  • Organizer: 情報処理学会第221回自然言語処理研究会 (SIG-NL) 第106回音声言語情報処理研究会 (SIG-SLP) 共催研究会
  • Place of Presentation: 東北大学片平さくらホール
  • Year and Date: 2015-05-25 – 2015-05-26
• [Presentation] 2つの手法を組み合わせたSTDにおけるクエリの特徴分類別性能調査と考察 (2015)
  • Author(s): 澤田直輝，名取賢，西崎博光
  • Organizer: 日本音響学会2015年春季研究発表会
  • Place of Presentation: 中央大学後楽園キャンパス
  • Year and Date: 2015-03-16 – 2015-03-18
• [Presentation] 音声認識結果から生成した補助的キーワード集合を利用する最良照合STD (2015)
  • Author(s): 堂元健太郎，宇津呂武仁，澤田直輝，西崎博光
  • Organizer: 日本音響学会2015年春季研究発表会
  • Place of Presentation: 中央大学後楽園キャンパス
  • Year and Date: 2015-03-16 – 2015-03-18
• [Presentation] Re-Ranking of Spoken Term Detections Using CRF-based Triphone Detection Models (2014)
  • Author(s): Naoki Sawada, Satoshi Natori, Hiromitsu Nishizaki
  • Organizer: Proceedings of the 6th Asia-Pacific Signal and Information Processing Association Annual Summit and Conference 2014
  • Place of Presentation: Sokha Angkor Resort Hotel, Siem Reap, the city of Angkor Wat, Cambodia
  • Year and Date: 2014-12-09 – 2014-12-12
• [Presentation] Selection of Best Match Keyword Using Spoken Term Detection for Spoken Document Indexing (2014)
  • Author(s): Kentaro Domoto, Takehito Utsuro, Naoki Sawada, Hiromitsu Nishizaki
  • Organizer: Proceedings of the 6th Asia-Pacific Signal and Information Processing Association Annual Summit and Conference 2014
  • Place of Presentation: Sokha Angkor Resort Hotel, Siem Reap, the city of Angkor Wat, Cambodia
  • Year and Date: 2014-12-09 – 2014-12-12
• [Presentation] Spoken Document Retrieval Experiments for SpokenQuery&Doc at Ryukoku University (RYSDT) (2014)
  • Author(s): Hiroaki Nanjo, Takehiko Yoshimi, Sho Maeda and Tomohiro Nishio
  • Organizer: In Proceedings of NTCIR-11 Workshop Meeting
  • Place of Presentation: National Center of Sciences, Tokyo, Japan
  • Year and Date: 2014-12-09 – 2014-12-12
• [Presentation] Overview of the NTCIR-11 SpokenQuery&Doc Task (2014)
  • Author(s): Tomoyosi Akiba, Hiromitsu Nishizaki, Hiroaki Nanjo and Gareth J. F. Jones
  • Organizer: In Proceedings of NTCIR-11 Workshop Meeting
  • Place of Presentation: National Center of Sciences, Tokyo, Japan
  • Year and Date: 2014-12-09 – 2014-12-12
• [Presentation] 講演音声ドキュメント検索における反復的擬似適合性フィードバックの検討 (2014)
  • Author(s): 南條浩輝，吉見毅彦
  • Organizer: 日本音響学会2014年秋季研究発表会
  • Place of Presentation: 北海学園大学豊平キャンパス
  • Year and Date: 2014-09-03 – 2014-09-05
• [Presentation] 最良照合STDによる音声ドキュメント索引付けの評価および分析 (2014)
  • Author(s): 堂元健太郎，宇津呂武仁，澤田直輝，西崎博光
  • Organizer: 日本音響学会2014年秋季研究発表会
  • Place of Presentation: 北海学園大学豊平キャンパス
  • Year and Date: 2014-09-03 – 2014-09-05
• [Presentation] 音声検索語検出のためのクエリ拡張の検討 (2014)
  • Author(s): 南條浩輝, 前田翔, 吉見毅彦
  • Organizer: 情報処理学会第216回自然言語処理研究会 (SIG-NL) 第101回音声言語情報処理研究会 (SIG-SLP) 合同研究発表会
  • Place of Presentation: 東京工業大学大岡山キャンパス
  • Year and Date: 2014-05-22 – 2014-05-23
• [Presentation] 音声言語処理のための要素技術と音声ドキュメント処理への応用 (2014)
  • Author(s): 西崎博光
  • Organizer: 電子情報通信学会マルチメディア情報ハイディング・エンリッチメント研究会
  • Place of Presentation: 東京理科大 葛飾キャンパス
  • Year and Date: 2014-05-15
• [Presentation] 段階的検索と擬似適合性フィードバックを用いた講演音声ドキュメント検索 (2014)
  • Author(s): 南條浩輝, 西尾友宏, 吉見毅彦
  • Organizer: 第8回音声ドキュメント処理ワークショップ
  • Place of Presentation: 豊橋市民センター(カリオンビル)6階多目的ホール
• [Presentation] 音声検索語検出のためのクエリ拡張の検討 (2014)
  • Author(s): 南條 浩輝, 前田 翔, 吉見 毅彦
  • Organizer: 情報処理学会 第216回自然言語処理研究会 第101回音声言語情報処理研究会 共催研究会
  • Place of Presentation: 東京工業大学大岡山キャンパス西8号館E棟10F大会議室
• [Presentation] 講演音声ドキュメント検索のための擬似適合性フィードバック (2013)
  • Author(s): 西尾友宏, 南條浩輝, 吉見毅彦
  • Organizer: 情報処理学会 第211回自然言語処理研究会 第96回音声言語情報処理研究会 共催研究会
  • Place of Presentation: 北陸先端科学技術大学院大学 東京サテライト
• [Presentation] 講演音声ドキュメント検索のための多段検索と検索質問文拡張 (2013)
  • Author(s): 西尾友宏，南條浩輝，吉見毅彦
  • Organizer: 日本音響学会関西支部 第16回関西支部若手研究者交流研究発表会
  • Place of Presentation: 産業技術総合研究所 関西センター
• [Presentation] 初等中等教育の授業を対象とした音声認識の基礎的分析 (2013)
  • Author(s): 南條浩輝，堀智織
  • Organizer: 日本音響学会2013年秋季研究発表会
  • Place of Presentation: 豊橋技術科学大学
• [Presentation] 条件付き確率場を用いた音声中の検索語検出の検討 (2013)
  • Author(s): 西崎博光，古屋裕斗，名取賢，関口芳廣
  • Organizer: 日本音響学会2013年秋季研究発表会
  • Place of Presentation: 豊橋技術科学大学
• [Presentation] 初等中等教育授業における教師発話の言語的特徴のモデル化のための学習データ選択方法の検討 (2013)
  • Author(s): 南條浩輝，谷奥大喜
  • Organizer: FIT2013 第12回情報科学技術フォーラム
  • Place of Presentation: 鳥取大学鳥取キャンパス
• [Presentation] ドキュメント長を考慮した擬似適合性フィードバックによる音声ドキュメント検索 (2013)
  • Author(s): 西尾友宏, 南條浩輝, 吉見毅彦
  • Organizer: 第7回音声ドキュメント処理ワークショップ
  • Place of Presentation: 名古屋大学東山キャンパス
• [Presentation] 音声中の検索語検出のための音素遷移ネットワークのエントロピー分析 (2013)
  • Author(s): 古屋裕斗，西崎博光，関口芳廣
  • Organizer: 第7回音声ドキュメント処理ワークショップ
  • Place of Presentation: 名古屋大学東山キャンパス
• [Presentation] 擬似適合性フィードバックを用いた音声ドキュメント検索におけるドキュメント長の影響の調査 -音声の長さに着目した検索質問文拡張に基づく動画検索- (2012)
  • Author(s): 西尾友宏, 南條浩輝, 吉見毅彦
  • Organizer: 日本音響学会関西支部 第15回関西支部若手研究者交流研究発表会
  • Place of Presentation: 産業技術総合研究所関西センター
• [Patent(Industrial Property Rights)] 音声ドキュメント検索方法および音声ドキュメント検索システム (2012)
  • Inventor(s): 南條浩輝、西尾友宏、吉見毅彦
  • Industrial Property Rights Holder: 学校法人龍谷大学
  • Industrial Property Rights Type: 特許
  • Industrial Property Number: 2012-196357
  • Filing Date: 2012-09-06