ユビキタスセンサに基づく対話行動認識プラットフォーム

• 研究領域: 人とロボットの共生による協創社会の創成
• 研究課題/領域番号: 21118003
• 研究種目: 新学術領域研究(研究領域提案型)
• 配分区分: 補助金
• 審査区分: 複合領域
• 研究機関: 株式会社国際電気通信基礎技術研究所
• 研究代表者: 萩田 紀博 株式会社国際電気通信基礎技術研究所, 社会メディア総合研究所, 所長 (40395158)
• 研究分担者: 塩見 昌裕 国際電気通信基礎技術研究所, 知能ロボティクス研究所, 室長 (90455577) ; 小泉 智史 国際電気通信基礎技術研究所, 知能ロボティクス研究所, 研究員 (70418531)
• 研究期間 (年度): 2009-07-23 – 2014-03-31
• 研究課題ステータス: 完了 (2013年度)
• 配分額: 99,060千円 (直接経費: 76,200千円、間接経費: 22,860千円); 2013年度: 16,120千円 (直接経費: 12,400千円、間接経費: 3,720千円); 2012年度: 20,280千円 (直接経費: 15,600千円、間接経費: 4,680千円); 2011年度: 20,280千円 (直接経費: 15,600千円、間接経費: 4,680千円); 2010年度: 20,280千円 (直接経費: 15,600千円、間接経費: 4,680千円); 2009年度: 22,100千円 (直接経費: 17,000千円、間接経費: 5,100千円)
• キーワード: 対話行動認識 / 環境表現 / ユビキタスセンシング / ユビキタスセンシンタグ

研究概要

本研究では，ロボットの周囲の人々の基本的対話行動認識技術の確立を最終的な目的として，ハードウェア・ソフトウェアの両面から研究開発を行った．まず，基本的対話行動を表すデータをどのような計測領域においても，また計測領域を拡張・移動させても，瞬時に取得できるユビキタスセンシングシステム構築技術を確立した．次に，実際の小学校に設置したユビキタスセンシングシステムから計測されるデータを蓄積し，小学生の理科の授業における音源アクティビティの分析，笑いイベントの分析などの，学びの様子に関する情報を抽出できることを確認した．

研究成果

• [雑誌論文] 信号の動きの相関性に注目した知覚の結び付け手法 (2014)
  • 著者名/発表者名: 池田徹志 ,石黒浩 ,ディラングラース ,塩見昌裕 ,宮下敬宏 ,萩田紀博
  • 雑誌名: 電子情報通信学会論文誌(情報・システム : D) 巻: Vol.J97-D No.3 ページ: 687-699
  • NAID: 110009804356
  • 査読あり
• [雑誌論文] 信号の動きの相関性に注目した知覚の結び付け手法 (2014)
  • 著者名/発表者名: 池田徹志 , 石黒浩 , ディラングラース , 塩見昌裕 , 宮下敬宏 , 萩田紀博
  • 雑誌名: 電子情報通信学会論文誌 （情報・システム: Ｄ） 巻: Vol.J97-D; No.3 ページ: 687-699
  • NAID: 110009804356
  • 査読あり
• [雑誌論文] Using body-conducted acoustic sensors for human-robot communication in noisy environments (2013)
  • 著者名/発表者名: Panikos HERACLEOUS, Carlos ISHII, Takahiro MIYASHITA, Hiroshi ISHIGURO, and Norihiro HAGITA
  • 雑誌名: International Journal of Advanced Robotic 巻: 10 号: 2 ページ: 1-7
  • DOI: 10.5772/55409
  • 査読あり
• [雑誌論文] 人々との身体的なインタラクションを行う小型ロボットのための慣性センサを用いた個人同定手法の確立 (2012)
  • 著者名/発表者名: 松村礼央, 塩見昌裕, 宮下敬宏, 石黒浩, 萩田紀博
  • 雑誌名: 電子情報通信学会論文誌A 巻: 95 ページ: 60-73
  • NAID: 110008898125
  • 査読あり
• [雑誌論文] 人とロボットの共生のための協創システム・プラットフォーム (2011)
  • 著者名/発表者名: 萩田紀博, 宮下敬宏
  • 雑誌名: 日本ロボット学会誌 巻: 29 ページ: 5-8
  • NAID: 10030208574
• [雑誌論文] 対話行動認識プラットフォーム (2011)
  • 著者名/発表者名: 塩見昌裕, 岩井儀雄, 角康之, 中臺一博, 萩田紀博
  • 雑誌名: 日本ロボット学会誌 巻: 29 ページ: 17-20
  • NAID: 10030208611
• [学会発表] 小学校理科室における笑いイベントの分析 (2014)
  • 著者名/発表者名: 石井カルロス寿憲 ,波多野博顕 ,萩田紀博
  • 学会等名: 日本音響学会2014年春季研究発表会
  • 発表場所: 日本大学理工学部
  • 年月日: 2014-03-10
• [学会発表] センサネットワークシステムによる学校理科室のデータ収集および分析 (2014)
  • 著者名/発表者名: 塩見昌裕
  • 学会等名: 平成25年度人ロボット共生学シンポジウム
  • 発表場所: 東京大学本郷キャンパス福武ホール
  • 年月日: 2014-01-12
• [学会発表] センサネットワークシステムによる小学校理科室のデータ収集および分析 (2014)
  • 著者名/発表者名: 石井 カルロス 寿憲
  • 学会等名: 平成25年度 人ロボット共生学シンポジウム
  • 発表場所: 東京大学 本郷キャンパス 福武ホール
• [学会発表] センサネットワークシステムによる学校理科室のデータ収集および分析 (2014)
  • 著者名/発表者名: 塩見 昌裕
  • 学会等名: 平成25年度 人ロボット共生学シンポジウム
  • 発表場所: 東京大学 本郷キャンパス 福武ホール
• [学会発表] 小学校理科室における笑いイベントの分析 (2014)
  • 著者名/発表者名: 石井 カルロス寿憲，波多野 博顕，萩田 紀博
  • 学会等名: 日本音響学会2014年春季研究発表会
  • 発表場所: 日本大学理工学部（東京）
• [学会発表] 理科室で子どもたちの好奇心向上に寄与するロボット (2013)
  • 著者名/発表者名: 塩見昌裕 ,神田崇行 ,石井 Carlos寿憲,小泉智史 ,萩田紀博
  • 学会等名: 第31回日本ロボット学会学術講演会 (RSJ2013)
  • 発表場所: 首都大学東京南大沢キャンパス
  • 年月日: 2013-09-04
• [学会発表] Analysis and evaluation of Parkinsonian speech (2013)
  • 著者名/発表者名: HERACLEOUS Panikos
  • 学会等名: 日本音響学会
  • 発表場所: 東京工業大学（東京）
  • 年月日: 2013-03-14
• [学会発表] Analysis and evaluation of Parkinsonian speech (2013)
  • 著者名/発表者名: HERACLEOUS Panikos
  • 学会等名: 日本音響学会
  • 発表場所: 東京工業大学（東京
  • 年月日: 2013-03-14
• [学会発表] マイクロフォンアレイとレーザ距離センサの連携による音源定位・データ記録システム (2013)
  • 著者名/発表者名: 石井カルロス寿憲
  • 学会等名: 新学術領域研究「人ロボット共生学」第５回国際ワークショップ
  • 発表場所: 日本科学未来館（東京）
  • 年月日: 2013-03-03
• [学会発表] 複数のマイクロホンアレイを用いた理科室における音源アクティビティの分析 (2013)
  • 著者名/発表者名: 石井カルロス寿憲，Jani Even，塩見昌裕，萩田紀博
  • 学会等名: 第38回 人工知能学会 AIチャレンジ研究会(SIG-Challenge)
  • 発表場所: 早稲田大学(東京都）
• [学会発表] 小学校の理科室で活動するロボット (2013)
  • 著者名/発表者名: 塩見昌裕，神田崇行，石井カルロス寿憲，小泉智史，萩田紀博
  • 学会等名: 第10回子ども学会学術集会
  • 発表場所: 岡山県立大学
• [学会発表] 理科室で子どもたちの好奇心向上に寄与するロボット (2013)
  • 著者名/発表者名: 塩見昌裕，神田崇行，石井カルロス寿憲，小泉智史，萩田紀博
  • 学会等名: 第31回 日本ロボット学会学術講演会(RSJ2013)
  • 発表場所: 首都大学東京 南大沢キャンパス(東京都八王子市）
• [学会発表] 軽微な失敗時におけるロボットの視線がもたらす印象変化 (2013)
  • 著者名/発表者名: 塩見昌裕，中川佳弥子，萩田紀博
  • 学会等名: 第31回 日本ロボット学会学術講演会(RSJ2013)
  • 発表場所: 首都大学東京 南大沢キャンパス(東京都八王子市）
• [学会発表] 複数のマイクロホンアレイによる音声アクティビティ：小学校理科室におけるデータ分析 (2013)
  • 著者名/発表者名: 石井カルロス寿憲，エバンヤニ，塩見昌裕，小泉智史，萩田紀博
  • 学会等名: 第31回 日本ロボット学会学術講演会(RSJ2013)
  • 発表場所: 首都大学東京 南大沢キャンパス(東京都八王子市）
• [学会発表] 小型二足歩行ロボットのための慣性センサを用いた床面種類の識別手法の提案 (2013)
  • 著者名/発表者名: 塩見昌裕，松村礼央，宮下敬宏，石黒浩，萩田紀博
  • 学会等名: 第31回 日本ロボット学会学術講演会(RSJ2013)
  • 発表場所: 首都大学東京 南大沢キャンパス(東京都八王子市）
• [学会発表] COMBININ G LASER RANGE FINDERS AND LOCAL STEERED RESPONSE POWE R FOR AUDIO MONITORING (2012)
  • 著者名/発表者名: Jani EVEN, Carlos Toshinori ISHI,Pa nikos HERACLEOUS,Takahiro MIYASHITA,Norihiro HAGITA
  • 学会等名: IEEE/RSJ International Conference on Inte lligent Robots and Systems IROS 2012
  • 発表場所: Vilamoura, Algarve, Portugal
  • 年月日: 2012-10-07
• [学会発表] ロボットによるグループインタラクション計測システムの構築 (2012)
  • 著者名/発表者名: 萩田 紀博
  • 学会等名: 平成24年度第1回人ロボット共生学シンポジウム
  • 発表場所: 東京大学情報学環福武ホール福武ラーニングシアター
  • 年月日: 2012-09-30
• [学会発表] マイクロホンアレイとLRFを連携させた発話区間検出の技術 (2012)
  • 著者名/発表者名: 石井カルロス寿憲
  • 学会等名: 平成24年度第1回人ロボット共生学シンポジウム
  • 発表場所: 東京大学情報学環福武ホール福武ラーニングシアター
  • 年月日: 2012-09-30
• [学会発表] マイクロホンアレイとLRFを連携させた個人同定の技術および評価 (2012)
  • 著者名/発表者名: EVEN Jani
  • 学会等名: 平成24年度第1回人ロボット共生学シンポジウム
  • 発表場所: 東京大学情報学環福武ホール福武ラーニングシアター
  • 年月日: 2012-09-30
• [学会発表] Harmonicity based fusion for speaker identification (2012)
  • 著者名/発表者名: EVEN Jani
  • 学会等名: 日本音響学会2012年秋季研究発表会
  • 発表場所: 信州大学（長野）
  • 年月日: 2012-09-21
• [学会発表] 保育に関する行動認識への取り組み (2012)
  • 著者名/発表者名: 塩見 昌裕
  • 学会等名: 第30回 日本ロボット学会学術講演会(RSJ)
  • 発表場所: 札幌コンベンションセンター（北海道）
  • 年月日: 2012-09-20
• [学会発表] 小型ロボットのための身体的なインタラクションを通じた個人・動作推定手法の提案 (2012)
  • 著者名/発表者名: 塩見 昌裕
  • 学会等名: 第30回 日本ロボット学会学術講演会(RSJ)
  • 発表場所: 札幌コンベンションセンター（北海道）
  • 年月日: 2012-09-18
• [学会発表] 対話行動認識プラットフォームを利用したオーバーラップする発話での話者同定 (2012)
  • 著者名/発表者名: 宮下 敬宏
  • 学会等名: 第30回 日本ロボット学会学術講演会(RSJ)
  • 発表場所: 札幌コンベンションセンター（北海道）
  • 年月日: 2012-09-18
• [学会発表] Body-conductive acoustic sensors in human-robot communication (2012)
  • 著者名/発表者名: P.Heracleous, C.T.Ishi, T.Miyashita, N.Hagita
  • 学会等名: The eighth international conference on Language Resources and Evaluation-LREC 2012
  • 発表場所: Istanbul, Turkey
  • 年月日: 2012-05-25
• [学会発表] Integrating body-conductive acoustic sensors for robust speech recognition (2012)
  • 著者名/発表者名: P.Heracleous, J.Even, T.Miyashita, N.Hagita
  • 学会等名: 2012 IEEE International Instrumentation and Measurement Technology Conference
  • 発表場所: Graz, Austria
  • 年月日: 2012-05-16
• [学会発表] Fusion of standard and alternative acoustic sensors for robust automatic speech recognition (2012)
  • 著者名/発表者名: P.Heracleous, J.Even, C.Ishi, T.Miyashita, N.Hagita
  • 学会等名: IEEE International Conference on Acoustics, Speech, and Signal Processing (ICASSP) 2012
  • 発表場所: Kyoto, Japan
  • 年月日: 2012-03-30
• [学会発表] Subjective speech intelligibility tests in body-conductive acoustic sensors (2012)
  • 著者名/発表者名: P.Heracleous, J.Even, C.Ishi, T.Miyashita, N.Hagita
  • 学会等名: Acoustical Society of Japan Spring Meeting 2012
  • 発表場所: Kanagawa, Japan
  • 年月日: 2012-03-13
• [学会発表] Masking for multi-channel multi-party speaker identification (2012)
  • 著者名/発表者名: J.Even, P.Heracleous, C.Ishi, T.Miyashita, N.Hagita
  • 学会等名: Acoustical Society of Japan Spring Meeting 2012
  • 発表場所: Kanagawa, Japan
  • 年月日: 2012-03-13
• [学会発表] Separation of Tactile Information from Multiple Sources Based on Spatial ICA and Time Series Clustering (2011)
  • 著者名/発表者名: L.Kyuhee, T.Ikeda, T.Miyashita, H.Ishiguro, N.Hagita
  • 学会等名: 2011 IEEE/SICE International Symposium on Systern Integration
  • 発表場所: Kyoto, Japan
  • 年月日: 2011-12-21
• [学会発表] Audio tracking for small meetings using laser range finders and local audio scans (2011)
  • 著者名/発表者名: J.Even, P.Heracleous, C.Ishi, T.Miyashita, N.Hagita
  • 学会等名: Proceedings of the 34th Meeting of Special Interest Group on AI Challenges
  • 発表場所: Kanagawa, Japan
  • 年月日: 2011-12-15
• [学会発表] MULTI-MODAL FRONT-END FOR SPEAKER ACTIVITY DETECTION IN SMALL MEETINGS (2011)
  • 著者名/発表者名: Jani EVEN, Panikos HERACLEOUS, Carlos Toshinori ISHI,Norihiro HAGITA
  • 学会等名: Conference Proceedings of 2011 IEEE/RSJ International Conference on Intelligent Robotsand Systems IROS 2011
  • 発表場所: San Francisco, USA
  • 年月日: 2011-09-26
• [学会発表] Using alternate acoustic sensors for speech communication and robust speech recognition (2011)
  • 著者名/発表者名: P.Heracleous, J.Even, C.Ishi, H.Ishiguro, N.Hagita
  • 学会等名: Acoustical Society of Japan Autumn Meeting 2011
  • 発表場所: Matsue, Japan
  • 年月日: 2011-09-20
• [学会発表] Investigating the use of NAM microphone in human-robot communication (2011)
  • 著者名/発表者名: P.Heracleous, C.Ishi, H.Ishiguro, N.Hagita
  • 学会等名: Acoustical Society of Japan Autumn Meeting 2011
  • 発表場所: Matsue, Japan
  • 年月日: 2011-09-20
• [学会発表] Multi-modal localization using LRFs and microphone array for hands-free speaker identification (2011)
  • 著者名/発表者名: J.Even, P.Heracleous, C.Ishi, T.Miyashita, N.Hagita
  • 学会等名: Acoustical Society of Japan Autumn Meeting 2011
  • 発表場所: Matsue, Japan
  • 年月日: 2011-09-20
• [学会発表] 対話行動認識プラットフォームレーザ距離計とマイクアレイによる人位置・話者同定システム (2011)
  • 著者名/発表者名: 宮下敬宏, Jani Even, 塩見昌裕, 萩田紀博
  • 学会等名: 第29回日本ロボット学会学術講演会
  • 発表場所: 芝浦工業大学豊洲キャンパス
  • 年月日: 2011-09-07
• [学会発表] twitterを用いた即応性の高いQ&A仲介エージェントの提案 (2011)
  • 著者名/発表者名: 佐野智章, 神原誠之, 萩田紀博, 宮下敬宏, 篠沢一彦
  • 学会等名: 電子情報通信学会技術研究報告
  • 発表場所: 北海道大学(札幌,北海道)
  • 年月日: 2011-08-24
• [学会発表] Automatic Calibration and Sensor Displacement Detection for Networks of Laser Range Finders for Human Tracking (2010)
  • 著者名/発表者名: Dylan F. GLAS,Takahiro MIYASHITA, Hiroshi ISHIGURO,Norihiro HAGITA
  • 学会等名: 2010 IEEE/RSJ International Conference on Intelligent Robots and Systems(IROS 2010)Conference
  • 発表場所: Taipei, Taiwan
  • 年月日: 2010-10-18
• [学会発表] Automatic Calibration and Sensor Displacement Detection for Networks of Laser Range Finders for Human Tracking (2010)
  • 著者名/発表者名: Dylan F. Glas, Takahiro Miyashita, Hiroshi Ishiguro, Norihiro Hagita
  • 学会等名: 2010 IEEE/RSJ International Conference on Intelligent Robots and Systems(IROS 2010)Conference DVD Proceedings
  • 発表場所: Taipei International Convention Center, Taipei, Taiwan
  • 年月日: 2010-10-18
• [学会発表] Non-Audible Murmur recognition based on fusion of audio and visual streams (2010)
  • 著者名/発表者名: Panikos Heracleous, Norihiro Hagita
  • 学会等名: Proceedings of Interspeech 2010
  • 発表場所: Makuhari Messe International Convention Complex, Makuhari, Japan
  • 年月日: 2010-09-26
• [学会発表] Gestures and Lip Shape Integration for Cued Speech Recognition (2010)
  • 著者名/発表者名: Panikos Heracleous, Denis Beautemps, Norihiro Hagita
  • 学会等名: Proc. of 20th International Conference Pattern Recognition
  • 発表場所: Istanbul Convention & Exhibition Centre, Istanbul, Turkey
  • 年月日: 2010-08-23
• [学会発表] EXPLOITING MULTIMODAL DATA FUSION IN ROBUST SPEECH RECOGNITION (2010)
  • 著者名/発表者名: Panikos Heracleous, Pierre Badin, Gerard Bailly, Norihiro Hagita
  • 学会等名: Proc. of 2010 IEEE International Conference on Multimedia and Expo(IEEE ICME)
  • 発表場所: Suntec Singapore International Convention & Exhibition Centre, Singapore
  • 年月日: 2010-07-19
• [学会発表] Person Identification by Integrating Wearable Sensors and Tracking Results from Environmental Sensors (2010)
  • 著者名/発表者名: Tetsushi Ikeda, Hiroshi Ishiguro,Dylan F.Glas, Masahiro Shiomi,Takahiro Miyashita, Norihiro Hagita
  • 学会等名: IEEE Int. Conf. on Robotics and Automation
  • 発表場所: Anchorage, Alaska
  • 年月日: 2010-05-03
• [学会発表] Enviroment description used in human-robot interaction based on multimodal information (2010)
  • 著者名/発表者名: Panikos Heracleous, Carlos Ishi, Tetsushi Ikeda, Reo Matsumura, Masahiro Shiomi, Takahiro Miyashita, Norihiro Hagita
  • 学会等名: 日本音響学会2010年春季研究発表会
  • 発表場所: 電気通信大学
  • 年月日: 2010-03-08
• [学会発表] 環境設置型センサとウェアラブルセンサを統合した個人同定 (2010)
  • 著者名/発表者名: 池田徹志, 石黒浩, Dylan F.Glas, 塩見昌裕, 宮下敬宏, 萩田紀博
  • 学会等名: 電子情報通信学会パターン認識・メディア理解(PRMU)研究会
  • 発表場所: 京都大学
  • 年月日: 2010-01-21
• [備考]
  • URL: http://www.irc.atr.jp/human-robot-symbiosis/
• [備考] 人とロボットの共生による協創社会の創成「人ロボット共生学」
  • URL: http://www.irc.atr.jp/human-robot-symbiosis/
• [備考]
  • URL: http://www.ire.atr.jp/human-robot-symbiosis/
• [備考]
  • URL: http://www.irc.atr.jp/human-robot-symbiosis/
• [備考]
  • URL: http://www.irc.atr.jp/human-robot-symbiosis/
• [産業財産権] LRFとマイクロホンアレイによる高精度な音源定位装置 (2011)
  • 発明者名: 石井Carlos寿憲, 塩見昌裕 ,Panikos Heracleous, Jani Even,宮下敬宏 . 小泉智史 , 萩田紀博
  • 権利者名: (株)国際電気通信基礎技術研究所
  • 産業財産権種類: 特許
  • 取得年月日: 2011-03-30
• [産業財産権] LRFとマイクロホンアレイによる高精度な音源定位装置 (2011)
  • 発明者名: 石井Carlos寿憲, 塩見昌裕, Panikos Heracleous, Jani Even, 宮下敬宏. 小泉智史, 萩田紀博
  • 権利者名: (株)国際電気通信基礎技術研究所
  • 出願年月日: 2011-03-30
• [産業財産権] 記録制御装置及び記録制御プログラムに関する技術 (2010)
  • 発明者名: 塩見昌裕(代表)
  • 権利者名: 株式会社国際電気通信基礎技術研究所
  • 産業財産権種類: 特許
  • 産業財産権番号: 2010-089175
  • 出願年月日: 2010-04-19