2011 Fiscal Year Final Research Report
Development of Robot Audition based on Computational Auditory Scene Analysis
| Project/Area Number |
19100003
|
|---|
| Research Category |
Grant-in-Aid for Scientific Research (S)
|
| Allocation Type | Single-year Grants |
|---|
| Research Field |
Perception information processing/Intelligent robotics
|
|---|
| Research Institution | Kyoto University |
|---|
Principal Investigator |
OKUNO Hiroshi 京都大学, 大学院・情報学研究科, 教授 (60318201)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
OGATA Tetsuya 京都大学, 大学院・情報学研究科, 准教授 (00318768)
KOMASTANI Kazunori 名古屋大学, 大学院・工学研究科, 准教授 (40362579)
TAKAHASHI Toru 京都大学, 大学院・情報学研究科, 教授 (30419494)
SHIRAMATSU Shun 名古屋工業大学, 工学研究科, 助教 (80548595)
NAKADAI Kazuhiro 東京工業大学, 情報理工研究科, 連携教授 (70436715)
KITAHARA Tetsuro 日本大学, 文理学部, 講師 (00454710)
ITOYAMA Katsutoshi 京都大学, 大学院・情報学研究科, 助教 (60614451)
|
|---|
| Co-Investigator(Renkei-kenkyūsha) |
ASANO Futoshi 産業技術総合研究所, グループリーダー (00231895)
|
|---|
| Project Period (FY) |
2007 – 2011
|
| Keywords | ロボット聴覚 / 音環境理解 / マルチドメイン音声対話 / 音楽共演ロボット / バージイン発話 / 聴覚アウエアネス / アクティブオーディション / ロボットインタラクション |
|---|
| Research Abstract |
Three main features of Computational Auditory Scene Analysis, sound source localization, sound source separation, and recognition of separated sounds, have been developed and their collections are made available as an open-sourced robot audition software called "HARK". As a proof of concepts in this robot audition, we developed "Prince Shotoku" robots that can listen to simultaneous talkers, and a spoken dialogue system that accepts a barge-in utterance of the user. We also developed various technologies to separate musical instrument parts for polyphonic performance, and real-time score following systems. These musical-related technologies are applied to make musical robots to play ensemble with human players
|
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
[Remarks] 受賞1)奥乃博: IEEE Fellow,ロボット聴覚技術への貢献, IEEE, Jan. 2012
-
[Remarks] 2) A. Lim, T. Mizumoto, L-K Cahier, T. Otsuka, T. Takahashi, K. Komatani, T. Ogata, H. G. Okuno : NTF Award for Entertainment Robots and Systems, IEEE/RSJ, Oct. 2010
-
[Remarks] 3) T. Otsuka, T. Mizumoto, K. Nakadai, T. Takahashi, K. Komatani, T. Ogata, H. G. Okuno : Best Paper Award, IEA/AIE, 2010.報道発表
-
[Remarks] 報道発表1)「複数の音を聞き分ける聖徳太子のようなロボットが登場!」,世の中進歩堂, BS Japan, 2011年2月4日
-
[Remarks] 2)日経エレクトロニクス,五感センサ,聴覚「聖徳太子の耳をすべての機器に」, pp. 75-77, 2008年2月25日号.日経BP社
-
[Remarks] 3)「聖徳太子ロボットの未来」,日経サイエンス, 2007年10月号.
-
[Remarks] 4)"Playing It by Ear-A machine-listening system that understands three speakers atonce", Scientific American, Aug. 2007, p. 28
-
-
-
-
