1987 Fiscal Year Annual Research Report
| Project/Area Number |
62608505
|
|---|
| Research Institution | Osaka University |
|---|
Principal Investigator |
田村 進一 大阪大学, 基礎工学部, 助教授 (30029540)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
黒須 顕二 九州工業大学, 工学部, 教授 (30117303)
小川 均 大阪大学, 産業科学研究所, 講師 (40116009)
|
|---|
| Keywords | 音声認識 / 画像処理 / 口形特徴 / DPマッチング / LPC係数 / X-Yトラッカ / 口話 |
|---|
| Research Abstract |
音声認識は実用化の域に達しつつあるが, 雑音の多い環境下での使用が困難であること, 類似音(とくに子音)の判別が依然難しいという問題がある. この問題を克服するため, 本研究では, 音声信号だけでなく唇の動きの情報も併用して音声認識を行なった.
1.口形特徴の抽出
単語を発生している時のビデノ画像から, 口の幅や高さなどの口形特徴が抽出された. このとき, 歯を含めた場合と含めない場合の2つに分けて処理を行なった.
2.音声特徴・口形特徴併用による音声認識
研究のステップの都合上, この場合の口形特徴は安定して求めることのできるX-Yトラッカを使用した.
音声は4KH_2, 12ビットでサンプルされ, 12次までのLPCケプストラム係数およびLPC係数が各24次まで拡張され, 各0次を加えた50次元特徴と登録データ間の非線形時間伸縮を考慮した距離がDP法により計算された.
一方, 話者の前方右約60度の位置に置いたX-Yトラッカ・カメラにより, 下唇の上下の動き, 前後の突き出し量が1/60秒毎に計測された. これらの特徴と登録データとの間の距離も同様に計算された.
これらの二つの距離の重み和で単語の識別を行なった. 類似した10単語(KAMAやKANAなど)の認識率は, 音声特徴のみの場合84%, 音声特徴に口形特徴を加えた場合は90%に向上した.
3.今後の課題
口形特徴の効率的抽出法および音声特徴と口形特徴を合わせてDPマッチングを行なう方式を開発したい.
|
-
[Publications] 松岡 清利: 電子情報通信学会論文誌D. J70-D. 2167-2171 (1987)
-
[Publications] Shinichi Tamura: Pattern Relognition. 21. (1988)
-
[Publications] 田村 進一: 第30回自動制御連合講演会NO.3062. 511-512 (1987)
-
[Publications] 小川 均: 電子情報通信学会技術研究報告(人工知能と知識処理研究会). AI87-19. 9-16 (1987)
-
[Publications] 田村 進一: 第35回(昭和62年後期)情報処理学会全国大会2M-3. 1587-1588 (1987)
