• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to previous page

状況認識に基づくスポーツ実況放送音声の認識と構造化

Research Project

Project/Area Number 18650039
Research Category

Grant-in-Aid for Exploratory Research

Allocation TypeSingle-year Grants
Research Field Perception information processing/Intelligent robotics
Research InstitutionKobe University

Principal Investigator

有木 康雄  Kobe University, 都市安全研究センター, 教授 (10135519)

Co-Investigator(Kenkyū-buntansha) 滝口 哲也  神戸大学, 都市安全研究センター, 講師 (40397815)
Project Period (FY) 2006 – 2008
Project Status Completed (Fiscal Year 2008)
Budget Amount *help
¥3,200,000 (Direct Cost: ¥3,200,000)
Fiscal Year 2008: ¥700,000 (Direct Cost: ¥700,000)
Fiscal Year 2007: ¥1,300,000 (Direct Cost: ¥1,300,000)
Fiscal Year 2006: ¥1,200,000 (Direct Cost: ¥1,200,000)
Keywords音声認識 / 状況認識 / 音響モデル / 言語モデル / インデックス情報 / 実況放送 / 単語共起 / 感情 / 音声等認識
Research Abstract

本研課題では、スポーツ実況放送の音声認識、及び状況理解を目的としている。状況理解により、スポーツ実況放送のシーンを構造的な単位に分割し、検索のためのメタ情報として利用可能とする。本研究課題では、確率的な枠組みに基づく音声と状況の同時認識、スポーツの進行に伴う状況変化のモデル化、状況に基づく音声認識モテルに特色がある。
状況変化モデルは、発話された音声を認識し、発話内容に基づいてイベント推定、及び状況の遷移を行うモデルとなる。ここでは特に発話内容からのイベント推定が重要となる。本研究では、多様な発話を高精度に分類可能なAdaBoostを推定のためのモデルとして用いた。ただし、AdaBoostの出力は確率ではないことから、スコアをsigmoid関数により擬似確率化して用いた。また、AdaBoostを行う際の特徴量として、単語順序を考慮可能な手法であるDTA-Kernel PCAについても研究を行った。
状況に基づく音声認識では、状況に応じて変化する言語的・音響的変化に対し、音声認識のモデルを適応する手法について研究を行った。本研究では、それぞれ状況に対応した複数の言語・音響モデルを構築しておき、認識時にモデルを切り替える手法を用いた。状況依存モデルの尤度、及び発話内容からの状況推定の尤度を統合し、最大化することにより、音声認識と状況推定を同時に行った。
スポーツ実況放送では、興奮した音声を含む場合があり、興奮音声の認識は通堂の音響モデルでは困難である。研究課題では、さらなる認識性能向上のため、新しい音声認識特徴量、発話スタイルの変動に頑健な音響モデルについても研究を行った。

Report

(3 results)
  • 2008 Annual Research Report
  • 2007 Annual Research Report
  • 2006 Annual Research Report
  • Research Products

    (65 results)

All 2009 2008 2007 2006 Other

All Journal Article (24 results) (of which Peer Reviewed: 10 results) Presentation (39 results) Remarks (2 results)

  • [Journal Article] 音声・状況の同時認識に某づくスポーツ実況中継へのメタ情報付与2009

    • Author(s)
      佐古淳
    • Journal Title

      情報処理学会論文誌 Vol. 50, No. 2

      Pages: 536-574

    • Related Report
      2008 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Speaker Independent Phoneme Recognition Based on Fisher Weight Map2008

    • Author(s)
      Takashi Muroi
    • Journal Title

      International Journal of Hybrid Information Technology Vol. 1, No. 3

      Pages: 61-70

    • Related Report
      2008 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Human-Robot Interface Using System Request Utterance Detection Based on Acoustic Features2008

    • Author(s)
      T. Takiguchi
    • Journal Title

      International Journal of Hybrid Information Technology Vol. 1, No. 3

      Pages: 81-90

    • Related Report
      2008 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Language Modeling Using PLSA-Based Topic HMM2008

    • Author(s)
      Atsushi Sako
    • Journal Title

      IEICE TRANSACTIONS on Information and Systems Vol.E91-D, No.3

      Pages: 522-528

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] PCA-Based Speech Enhancement for Distorted Speech Recognition2007

    • Author(s)
      Tetsuya Takiguchi
    • Journal Title

      Journal of Multimedia Volume 2, Issue 5

      Pages: 13-18

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Estimation of Room Acoustic Transfer Function Using Speech Model2007

    • Author(s)
      Tetsuya Takiguchi
    • Journal Title

      IEEE Statistical Signal Processing Workshop 2007

      Pages: 336-340

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Noise detection and classification in speech signals with boosting2007

    • Author(s)
      Nobuyuki Miyake
    • Journal Title

      IEEE Statistical Signal Processing Workshop 2007

      Pages: 778-782

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] PCA-Based Feature Extraction for Fluctuation in Speaking Style of Articulation Disorders2007

    • Author(s)
      Hironori Matsumasa
    • Journal Title

      Interspeech2007

      Pages: 1150-1153

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] System Request Detection in Conversation Based on Acoustic and Speaker Alternation Features2007

    • Author(s)
      Tomoyuki Yamagata
    • Journal Title

      Interspeech2007

      Pages: 2789-2792

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] Estimation of Sound Source Direction Using Parabolic Reflection Board2007

    • Author(s)
      Tetsuya Takiguchi
    • Journal Title

      NCSP 2008

      Pages: 9-12

    • Related Report
      2007 Annual Research Report
    • Peer Reviewed
  • [Journal Article] トピックモデルとタスクの知識を用いた言語モデルによる野球実況中継の構造化2007

    • Author(s)
      佐古淳
    • Journal Title

      第1回音声ドキュメント処理ワークショップ

      Pages: 115-120

    • Related Report
      2006 Annual Research Report
  • [Journal Article] ブースティングを用いた野球実況中継に対するメタデータの作成2007

    • Author(s)
      佐古淳
    • Journal Title

      第1回音声ドキュメント処理ワークショップ

      Pages: 121-126

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 構音障害者の音声認識の検討2007

    • Author(s)
      松政宏典
    • Journal Title

      日本音響学会2007年春季研究発表会

      Pages: 322-324

    • Related Report
      2006 Annual Research Report
  • [Journal Article] フィッシャー重みマップに基づく不特定話者音素認識の検討2007

    • Author(s)
      加藤俊祐
    • Journal Title

      日本音響学会2007年春季研究発表会

      Pages: 127-128

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 3次キュムラントのバイスペクトラムとPCAによる音声区間検出2007

    • Author(s)
      松田博義
    • Journal Title

      日本音響学会2007年春季研究発表会

      Pages: 133-134

    • Related Report
      2006 Annual Research Report
  • [Journal Article] AdaBoostを用いた雑音の検出と識別2007

    • Author(s)
      三宅信之
    • Journal Title

      日本音響学会2007年春季研究発表会

      Pages: 141-142

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 2ch マイクロフォン間の振幅補正を考慮した複素スペクトル平面上での雑音除去2007

    • Author(s)
      大久保俊也
    • Journal Title

      日本音響学会2007年春季研究発表会

      Pages: 717-718

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Phoneme Recognition Based on Fisher Weight Map to Higher-Order Local2006

    • Author(s)
      Yasuo Ariki
    • Journal Title

      Interspeech 2006

      Pages: 377-380

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Robust Feature Extraction Using Kernel PCA2006

    • Author(s)
      Tetsuya Takiguchi
    • Journal Title

      ICASSP2006

      Pages: 509-512

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 構音障害者の音声認識の検討2006

    • Author(s)
      松政宏典
    • Journal Title

      電子情報通信学会技術研究報告 WIT2006-75

      Pages: 13-18

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 局所特徴量によるフィッシャー重みマップに基づく音素認識2006

    • Author(s)
      加藤俊祐
    • Journal Title

      第8回音声言語シンポジウムSLP-64

      Pages: 19-24

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 3次キュムラントのBispectrumとMFCCの統合による音声区間検出の検討2006

    • Author(s)
      松田博義
    • Journal Title

      電子情報通信学会技術研究報告 SP-2006-85

      Pages: 89-94

    • Related Report
      2006 Annual Research Report
  • [Journal Article] 3次キュムラント音声特徴を用いた音声区間検出2006

    • Author(s)
      松田博義
    • Journal Title

      電子情報通信学会技術研究報告 SIP-2006

      Pages: 37-42

    • Related Report
      2006 Annual Research Report
  • [Journal Article] Real Adaboostによる音声区間検出2006

    • Author(s)
      松田博義
    • Journal Title

      日本音響会2006年秋季研究発表会

      Pages: 117-118

    • Related Report
      2006 Annual Research Report
  • [Presentation] 音声・状況の同時認識に基づく野球実況中継へのメタ情報付与2009

    • Author(s)
      佐古淳
    • Organizer
      第3回者声ドキュメント処理ワークショップ
    • Place of Presentation
      豊橋
    • Related Report
      2008 Annual Research Report
  • [Presentation] 雑談中の潜在的話題遷移を考慮したユーザーの意図推定の検討2009

    • Author(s)
      佐古淳
    • Organizer
      日本音響学会2009年春季研究発表会
    • Place of Presentation
      東京
    • Related Report
      2008 Annual Research Report
  • [Presentation] 複数の言語情報を用いたCRFによる音声認識誤りの検出2009

    • Author(s)
      松本智彦
    • Organizer
      日本音響学会2009年春季研究発表会
    • Place of Presentation
      東京
    • Related Report
      2008 Annual Research Report
  • [Presentation] ランダムプロジェクシヨンを用いた音声特徴量抽出2009

    • Author(s)
      吉井麻里子
    • Organizer
      日本音響学会2009年春季研究発表会
    • Place of Presentation
      東京
    • Related Report
      2008 Annual Research Report
  • [Presentation] FBANKとGaborWaveletを用いたシステムへの問い合わせと雑談の判別2008

    • Author(s)
      山形知行
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] パラボラ反射板を用いたアクティブマイクロフォンによる音源方向推定2008

    • Author(s)
      高島遼一
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] 単一マイクロホンを用いた音響伝達特性の尤度判定による音源位置推定2008

    • Author(s)
      住田雄司
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] SVMとCARTの組み合わせによるAdaBoostを用いた音声区間検出2008

    • Author(s)
      松田博義
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] 音声特徴量抽出のための音素部分空間統合法の検討2008

    • Author(s)
      朴玄信
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] 話者正規化に基づく構音障害者の音声認識2008

    • Author(s)
      松政宏典
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] LSAに基づくOne-Class SVMを用いた音声認識仮説の検証2008

    • Author(s)
      松本智彦
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] 動的計画法に基づく文脈の変化を考慮したLSAの検討2008

    • Author(s)
      佐古淳
    • Organizer
      日本音響学会2008年春季研究発表会
    • Place of Presentation
      千葉
    • Year and Date
      2008-03-17
    • Related Report
      2007 Annual Research Report
  • [Presentation] Sudden Noise Reduction Based on GMM with Noise Power Estimation2008

    • Author(s)
      Nobuyuki Miyake
    • Organizer
      Interspeech 2008
    • Place of Presentation
      オーストラリア
    • Related Report
      2008 Annual Research Report
  • [Presentation] Integration of Phoneme-subspaces using ICA for Speech Feature Extraction and Recognition2008

    • Author(s)
      Hyunsin Park
    • Organizer
      HSCMA2008
    • Place of Presentation
      イタリア
    • Related Report
      2008 Annual Research Report
  • [Presentation] Speaker Independent Phoneme Recognition Based on Fisher Weight Map2008

    • Author(s)
      Takashi Muroi
    • Organizer
      The 2nd International Conference on Multimediaand Ubiquitous Engineering (MUE2008)
    • Place of Presentation
      韓国
    • Related Report
      2008 Annual Research Report
  • [Presentation] Human-Robot Interface Using System Request Utterance Detection Based on Acoustic Features2008

    • Author(s)
      Tetsuya Takiguchi
    • Organizer
      The 2nd International Conference on Multimediaand Ubiquitous Engineering (MUE2008)
    • Place of Presentation
      韓国
    • Related Report
      2008 Annual Research Report
  • [Presentation] 単語出現順序を考慮したトピックモデルによる言語モデル適応2008

    • Author(s)
      佐古淳
    • Organizer
      第10回音声言語シンポジウム
    • Place of Presentation
      早稲田
    • Related Report
      2008 Annual Research Report
  • [Presentation] 制約付き非負行列因子分解を用いた音声特徴抽出の検討2008

    • Author(s)
      朴玄信
    • Organizer
      第10回音声言語シンポジウム
    • Place of Presentation
      早稲田
    • Related Report
      2008 Annual Research Report
  • [Presentation] スペクトル平面における勾配ヒストグラムに基づく音声特徴量の検討2008

    • Author(s)
      室井貴司
    • Organizer
      第10回音声言語シンポジウム
    • Place of Presentation
      早稲田
    • Related Report
      2008 Annual Research Report
  • [Presentation] 音声の動的特徴のモデルを使った突発性雑音の除去2008

    • Author(s)
      三宅信之
    • Organizer
      第10回が声よ語シンポジウム
    • Place of Presentation
      早稲田
    • Related Report
      2008 Annual Research Report
  • [Presentation] MDL基準とICAを用いた統合音素部分空間による音声特徴量抽出の検討2008

    • Author(s)
      朴玄信
    • Organizer
      日本音絆学会2008年秋季研究発表会
    • Place of Presentation
      福岡
    • Related Report
      2008 Annual Research Report
  • [Presentation] DP-Kernel PCA を用いた発話系列への意図ラペリングの検討2008

    • Author(s)
      佐古淳
    • Organizer
      日本音響学会2008年秋季研究発表会
    • Place of Presentation
      福岡
    • Related Report
      2008 Annual Research Report
  • [Presentation] GMMに基づく音声特徴量の時間変動を考慮した突発性雑音の除去2008

    • Author(s)
      三宅信之
    • Organizer
      日本音響学会2008年秋季研究発衣会
    • Place of Presentation
      福岡
    • Related Report
      2008 Annual Research Report
  • [Presentation] 勾配に基づく特徴量を用いた音声認識の検討2008

    • Author(s)
      室井貴司
    • Organizer
      日本音響学会2008年秋季研究発表会
    • Place of Presentation
      福岡
    • Related Report
      2008 Annual Research Report
  • [Presentation] 韻律及び話者交代情報を用いたシステム要求検出2007

    • Author(s)
      山形知行
    • Organizer
      第9回音声言語シンポジウム
    • Place of Presentation
      京阪奈(京都)
    • Year and Date
      2007-12-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] 音素部分空間の統合による音声特徴量抽出の検討2007

    • Author(s)
      朴 玄信
    • Organizer
      第9回音声言語シンポジウム
    • Place of Presentation
      京阪奈(京都)
    • Year and Date
      2007-12-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] 弱識別器にSVMを用いたAdaBoostの検討2007

    • Author(s)
      松田博義
    • Organizer
      第9回音声言語シンポジウム
    • Place of Presentation
      京阪奈(京都)
    • Year and Date
      2007-12-20
    • Related Report
      2007 Annual Research Report
  • [Presentation] 音声認識との統合によるシステム要求検出2007

    • Author(s)
      佐古淳
    • Organizer
      第9回音声言語シンポジウム
    • Place of Presentation
      京阪奈(京都)
    • Year and Date
      2007-12-20
    • Related Report
      2007 Annual Research Report
  • [Presentation] 音声GMMと雑音重み推定を用いた雑音除去2007

    • Author(s)
      三宅信之
    • Organizer
      第9回音声言語シンポジウム
    • Place of Presentation
      京阪奈(京都)
    • Year and Date
      2007-12-20
    • Related Report
      2007 Annual Research Report
  • [Presentation] 話者交替を考慮したシステムへの問い合わせと雑談の判別2007

    • Author(s)
      山形知行
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      甲府(山梨)
    • Year and Date
      2007-09-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] 3次キュムラントバイスペクトラム特徴とReal AdaBoostによる音声区間検出2007

    • Author(s)
      松田博義
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      甲府(山梨)
    • Year and Date
      2007-09-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] フィッシャー重みマップに基づく音声特徴量のロバストネスに関する考察2007

    • Author(s)
      室井貴司
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      甲府(山梨)
    • Year and Date
      2007-09-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] PCAを用いた音素ベクトルによる音声特徴量抽出の検討2007

    • Author(s)
      朴玄信
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      甲府(山梨)
    • Year and Date
      2007-09-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] 雑音重み推定と音声GMMを用いた既知雑音除去2007

    • Author(s)
      三宅信之
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      甲府(山梨)
    • Year and Date
      2007-09-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] 単一マイクロホンを用いた音響伝達特性の判別による音源方向推定の検討2007

    • Author(s)
      住田雄司
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      甲府(山梨)
    • Year and Date
      2007-09-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] 脳性麻痺構音障害者の音声認識による情報家電操作の検討2007

    • Author(s)
      松政宏典
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      甲府(山梨)
    • Year and Date
      2007-09-21
    • Related Report
      2007 Annual Research Report
  • [Presentation] ワードグラフを考慮したシステム要求検出2007

    • Author(s)
      佐古淳
    • Organizer
      日本音響学会2007年秋季研究発表会
    • Place of Presentation
      甲府(山梨)
    • Year and Date
      2007-09-20
    • Related Report
      2007 Annual Research Report
  • [Presentation] 音素PCAを用いた残響下における音声特徴量抽出2007

    • Author(s)
      朴玄信
    • Organizer
      電子情報通信学会技術研究報告
    • Place of Presentation
      京阪奈(京都)
    • Year and Date
      2007-05-31
    • Related Report
      2007 Annual Research Report
  • [Presentation] 情報家電操作における脳性麻痺構音障害者の音声認識評価2007

    • Author(s)
      松政宏典
    • Organizer
      電子情報通信学会技術研究報告
    • Place of Presentation
      沖縄
    • Year and Date
      2007-05-24
    • Related Report
      2007 Annual Research Report
  • [Remarks]

    • URL

      http://www.me.cs.scitec.kobe-u.ac.jp/publications/publications.html

    • Related Report
      2008 Annual Research Report
  • [Remarks]

    • URL

      http://www.me.cs.scitec.kobe-u.ac.jp/publications/publications.html

    • Related Report
      2007 Annual Research Report

URL: 

Published: 2006-04-01   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi