• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2010 Fiscal Year Annual Research Report

セマンティック・ヒューマノイドインタラクション

Planned Research

Project AreaCyber Infrastructure for the Information-explosion Era
Project/Area Number 18049016
Research InstitutionThe University of Tokyo

Principal Investigator

國吉 康夫  東京大学, 大学院・情報理工学系研究科, 教授 (10333444)

Co-Investigator(Kenkyū-buntansha) 森 武俊  東京大学, 大学院・医学系研究科, 特任准教授 (20272586)
稲邑 哲也  国立情報学研究所, 情報学プリンシプル研究系, 准教授 (20361545)
長久保 晶彦  独立行政法人産業技術総合研究所, 知能システム研究部門, 研究員 (00357617)
山本 知幸  大阪大学, 大学院・基礎工学研究科, 特任研究員 (90345653)
原田 達也  東京大学, 大学院・情報理工学系研究科, 准教授 (60345113)
Keywordsロボット / 行動 / 意味 / 認識・学習 / 自然言語
Research Abstract

情報システムの多機能化、高機能化によってもたらされる複雑性を克服し,安心・快適な情報環境を構築するには,人間と情報システムとの間のギャップを,ロボットによるマルチモーダル・インタラクションによって解消する事が必要である.本研究では,人間とロボットが,実世界の中で臨機応変に意味レベルのインタラクションを達成することを目指して,人間の振る舞いや周囲環境の様子を認識・理解しつつ,その情報をライフログやサイバースペース等から得られる膨大な知識情報と統合・解釈し,状況に即した対話や知的支援などを行う機能の構築を目的とした.
H22年度は成果の統合とシステム化に重点を置いた.前年度までに,実世界事象,特に人間の行為からの意味情報抽出の各要素,すわなち,動作認識,事物認識,記号を経由した蓄積情報との関連づけ等に関して大きな進展があった.これらを統合することで,自然言語やロボット動作を通して人間と意味的インタラクションを行うシステムの構築に取り組んだ.研究計画中の課題としては,次の2課題に対応する.課題5:意味情報抽出,蓄積情報との統合解釈,意味レベル行動生成を融合,一体化した意味レベル相互作用の理論とシステム,課題6:意味レベル相互作用を知的人間支援行動として具現化するロボットシステムや言語インタラクション.
最終的な統合システムは「ジャーナリストロボット」として実現した.これは,日常環境中を自律的に動き回り,人々の興味を喚起する出来事を発見,認識,理解し,インタビューなども行って,ニュースブログのような分かり易い形にまとめて情報発信するという,従来にない新たな知的支援機能を世界で初めて提案し実現したものである.画像音声認識,自律移動,人間の発見・接近・発話に基づくインタビュー機能,などを統合実装し,その上に,意味レベルインタラクション機能として,実世界を自律的に探索し,重要な意味を持つ異変を画像認識と知識情報を統合して認識・解釈し,インタビューも自律的に行い,それらの結果を自然言語処理と統合してニュース記事として生成,配信するシステムを構築した.
このシステムは,最終成果報告会でデモを行い,メディア報道を含め多くの関心を集めた.また,画像認識等の要素技術は,権威ある国際会議のコンペ世界3位他,多くの世界トップレベル国際会議論文採択や受賞等で高く評価された.

  • Research Products

    (41 results)

All 2011 2010 Other

All Journal Article (19 results) (of which Peer Reviewed: 19 results) Presentation (21 results) Remarks (1 results)

  • [Journal Article] Event Understanding of Human-Object Interaction : Object Movement Detection via Stable Changes2011

    • Author(s)
      Shigeyuki Odashima, Taketoshi Mori, Masamichi Shimosaka, Hiroshi Noguchi, Tomomasa Sato
    • Journal Title

      Intelligent Video Event Analysis and Understanding : Studies in Computational Intelligence

      Volume: 332 Pages: 195-210

    • Peer Reviewed
  • [Journal Article] Kohei Matsumura, Tomoyuki Yamamoto and Tsutomu Fujinam2011

    • Author(s)
      Kohei Matsumura, Tomoyuki Yamamoto, Tsutomu Fujinami
    • Journal Title

      Research Studies in Music Education

      Volume: (印刷中(掲載確定))

    • Peer Reviewed
  • [Journal Article] A Wearable Accelerometer Array for Human Movement Analysis based on rBSN Approach2011

    • Author(s)
      Kohei Matsumura, Tomoyuki Yamamoto
    • Journal Title

      SICE Journal of Control, Measurement, and System Integration

      Volume: (印刷中(掲載確定))

    • Peer Reviewed
  • [Journal Article] Management of Experience Data for Rapid Adaptation to New Preferences based on Bayesian Significance Evaluation2011

    • Author(s)
      Saifuddin Md.Tareeq, Tetsunari Inamura
    • Journal Title

      Advanced Robotics

      Volume: (印刷中(掲載確定))

    • Peer Reviewed
  • [Journal Article] Exploring Sketching for Robot Collaboration2011

    • Author(s)
      Matei Negulescu, Tetsunari Inamura
    • Journal Title

      Proc.Of 6th ACM/IEEE International Conference on Human-Robot Interaction

      Volume: (電子媒体)

    • Peer Reviewed
  • [Journal Article] 実世界と結合した共有cyber空間を用いた人間ロボット協調系~社会的知能発生学シミュレータSIGVerseのHRIへの展開~2011

    • Author(s)
      稲邑哲也
    • Journal Title

      第16回ロボティクスシンポジア予稿集

    • Peer Reviewed
  • [Journal Article] Image Annotation and Retrieval for Weakly Labeled Images Using Conceptual Learning2010

    • Author(s)
      Tatsuya Harada, Hideki Nakayama, Yasuo Kuniyoshi, Nobuyuki Otsu
    • Journal Title

      New Generation Computing

      Volume: Vol.28 Pages: 277-298

    • Peer Reviewed
  • [Journal Article] 大規模Web画像のための画像アノテーション・リトリーバル手法2010

    • Author(s)
      中山英樹, 原田達也, 國吉康夫
    • Journal Title

      電子情報通信学会論文誌

      Volume: Vol.J93-D Pages: 1267-1280

    • Peer Reviewed
  • [Journal Article] High-speed 3D Object Recognition Using Additive Features in A linear Subspace2010

    • Author(s)
      Asako Kanezaki, Hideki Nakayama, Tatsuya Harada, Yasuo Kuniyoshi
    • Journal Title

      Proc.of 2010 IEEE International Conference on Robotics and Automation (ICRA2010)

      Pages: 3128-3134

    • Peer Reviewed
  • [Journal Article] Global Gaussian Approach for Scene Categorization Using Information Geometry2010

    • Author(s)
      Hideki Nakayama, Tatsuya Harada, Yasuo Kuniyoshi
    • Journal Title

      Proc.of The Twenty-Third IEEE International Conference on Computer Vision and Pattern Recognition (CVPR2010)

      Volume: (CD-ROM)

    • Peer Reviewed
  • [Journal Article] Improving Local Descriptors by Embedding Global and Local Spatial Information2010

    • Author(s)
      Tatsuya Harada, Hideki Nakayama, Yasuo Kuniyoshi
    • Journal Title

      Proc.of European Conference on Computer Vision (ECCV 2010)

      Pages: 736-749

    • Peer Reviewed
  • [Journal Article] Multiple-Person Tracking by Multiple Cameras and Laser Range Scanners in Indoor Environments2010

    • Author(s)
      Hiroshi Noguchi, Taketoshi Mori, Takashi Matsumoto, Masamichi Shimosaka, Tomomasa Sato
    • Journal Title

      Journal of Robotics and Mechatronics

      Volume: 22 Pages: 221-229

    • Peer Reviewed
  • [Journal Article] 部屋を単位とする環境型ロボット2010

    • Author(s)
      佐藤知正, 森武俊
    • Journal Title

      計測と制御

      Volume: 49 Pages: 354-361

    • Peer Reviewed
  • [Journal Article] Object Usual Places Extraction in Smart Space : Robotic Room2010

    • Author(s)
      Taketoshi Mori, Naofumi Hosoda
    • Journal Title

      Robotics Research : Springer Tracts in Advanced Robotics

      Volume: 66 Pages: 111-122

    • Peer Reviewed
  • [Journal Article] Rapid Behavior Adaptation for Human-centered Robots in Dynamic Environment based on Integration of Primitive Confidences on Multi-sensor Elements2010

    • Author(s)
      Saifuddin Md.Tareeq, Tetsunari Inamura
    • Journal Title

      Journal of Artificial Life and Robotics

      Volume: 15 Pages: 515-521

    • Peer Reviewed
  • [Journal Article] 動作パターンとシンボルを相互変換する原始シンボル空間における動作パターンの内挿・外2010

    • Author(s)
      稲邑哲也, 柴田智広
    • Journal Title

      日本ロボット学会誌

      Volume: 28 Pages: 512-521

    • Peer Reviewed
  • [Journal Article] Simulator platform that enables social interaction simulation--SIGVerse : SocioIntelliGenesis? simulator--2010

    • Author(s)
      Tetsunari Inamura, et al
    • Journal Title

      Proc.Of IEEE/SICE International Symposium on System Integrati

      Pages: 212-217

    • Peer Reviewed
  • [Journal Article] Surrounding Display and Gesture based Robot Interaction Space to Enhance User Perception for Teleoperated Robots2010

    • Author(s)
      Ohhoon Kwon, Tetsunari Inamura
    • Journal Title

      Proceedings of Int'l Conf.on Advanced Mechatronics

      Pages: 277-282

    • Peer Reviewed
  • [Journal Article] Rapid Behavior Adaptation for Human-centered Robots based on Integration of Primitive Confidence on Multi-sensor Elements2010

    • Author(s)
      Saifuddin Md.Tareeq, Tetsunari Inamura
    • Journal Title

      Proceedings of Int'l Conf.on Advanced Mechatronics

      Pages: 271-276

    • Peer Reviewed
  • [Presentation] 実世界と結合した共有cyber空間を用いた人間ロボット協調系~社会的知能発生学シミュレータSIGVerseのHRIへの展開~2011

    • Author(s)
      稲邑哲也
    • Organizer
      第16回ロボティクスシンポジア
    • Place of Presentation
      鹿児島,日本
    • Year and Date
      2011-03-15
  • [Presentation] Exploring Sketching for Robot Collaboration2011

    • Author(s)
      Matei Negulescu
    • Organizer
      6th ACM/IEEE International Conference on Human-Robot Interact
    • Place of Presentation
      Lausanne, Switzerland
    • Year and Date
      2011-03-07
  • [Presentation] 時系列間の影響波及の遅れを考慮した縮小推定による因果指標の拡張2011

    • Author(s)
      山下裕也, 渋谷崇, 原田達也, 國吉康夫
    • Organizer
      情報処理学会第73回全国大会
    • Place of Presentation
      東京
    • Year and Date
      2011-03-04
  • [Presentation] 複数画像特徴とクラスラベルの相関に着目した距離計量による大規模画像分類2011

    • Author(s)
      牛久祥孝, 山下裕也, 井村純, 中山英樹, 原田達也, 國吉康夫
    • Organizer
      パターン認識・メディア理解研究会(PRMU)
    • Place of Presentation
      埼玉
    • Year and Date
      2011-02-17
  • [Presentation] Simulator platform that enables social interaction simulation--SIGVerse : SocioIntelliGenesis simulator--2010

    • Author(s)
      Tetsunari Inamura
    • Organizer
      IEEE/SICE International Symposium on System Integration
    • Place of Presentation
      Sendai, Japan
    • Year and Date
      2010-12-21
  • [Presentation] Learning from mistakes : object movement classification by the boosted features2010

    • Author(s)
      Shigeyuki Odashima, Tomomasa Sato, Taketoshi Mori
    • Organizer
      The 2nd international workshop on video event categorization, tagging and retrieval
    • Place of Presentation
      Queenstown, New Zealand
    • Year and Date
      2010-11-08
  • [Presentation] Mobile Robots and People Tracking based on Switching Network-managed Distributed Sensors2010

    • Author(s)
      Hiroshi Noguchi, Takaki Yamada, Taketoshi Mori, Tomomasa Sato
    • Organizer
      IROS 2010 Workshop, Ubiquitous Networking Robotics : an approach for Human-Robot Interaction
    • Place of Presentation
      Taipei, Taiwan
    • Year and Date
      2010-10-22
  • [Presentation] Household object management via integration of object movement detection from multiple2010

    • Author(s)
      Shigeyuki Odashima, Tomomasa Sato, Taketoshi Mori
    • Organizer
      2010 IEEE/RSJ International Conference on Intelligent Robots and Systems
    • Place of Presentation
      Taipei, Taiwan
    • Year and Date
      2010-10-20
  • [Presentation] Rapid Behavior Adaptation for Human-centered Robots based on Integration of Pr2010

    • Author(s)
      Saifuddin Md.Tareeq
    • Organizer
      International Conference on Advanced Mechatronics
    • Place of Presentation
      Osaka, Japan
    • Year and Date
      2010-10-05
  • [Presentation] Surrounding Display and Gesture based Robot Interaction Space to Enhance User Perception for Teleoperated Robots2010

    • Author(s)
      Ohhoon Kwon
    • Organizer
      International Conference on Advanced Mechatronics
    • Place of Presentation
      Osaka, Japan
    • Year and Date
      2010-10-05
  • [Presentation] 高度な身体技能の獲得過程における非単調性--協調と分化--2010

    • Author(s)
      山本知幸
    • Organizer
      平成22年度情報処理学会関西支部 支部大会
    • Place of Presentation
      大阪大学中之島センター
    • Year and Date
      2010-09-22
  • [Presentation] Detecting human activity profiles with Dirichlet enhanced in homogeneous Poisson processes2010

    • Author(s)
      Masamichi Shimosaka, Takahito Ishino, Hiroshi Noguchi, Tomomasa Sato, Taketoshi Mori
    • Organizer
      Twentieth International Conference on Pattern Recognition
    • Place of Presentation
      Istanbul, Turkey
    • Year and Date
      2010-08-25
  • [Presentation] Towards Emergence of Meaning in Embodied Cognitive Systems2010

    • Author(s)
      Yasuo Kuniyoshi
    • Organizer
      2010 International Symposium on Machine Perception and Cognition
    • Place of Presentation
      Beijing, China
    • Year and Date
      2010-08-05
  • [Presentation] 自ら意味を獲得するロボットの構築に向けて2010

    • Author(s)
      國吉康夫
    • Organizer
      外国語教育メディア学会(LET)50周年記念全国研究大会
    • Place of Presentation
      横浜
    • Year and Date
      2010-08-04
  • [Presentation] Multi-People Pose Tracking through Voxel Streams2010

    • Author(s)
      Masamichi Shimosaka, Yuichi Sagawa, Tomomasa Sato, Taketoshi Mori
    • Organizer
      2010 IEEE International Conference on Multimedia and Expo
    • Place of Presentation
      Singapore, Singapore
    • Year and Date
      2010-07-20
  • [Presentation] System for Tracking Human Position by Multiple Laser Range Finders Deployed in Existing Home Environment2010

    • Author(s)
      Hiroshi Noguchi, Ryo Urushibata, Takahiro Sato, Taketoshi
    • Organizer
      The 8th International Conference on Smart Homes and Health Telematics
    • Place of Presentation
      Seoul, Korea
    • Year and Date
      2010-06-23
  • [Presentation] 遺伝的プログラミングを用いたニューラルネットワークの構造及び学習側の生成2010

    • Author(s)
      國吉康夫, 小野嶋勇介
    • Organizer
      日本機械学会ロボティクス・メカトロニクス講演会2010(Robomec2010)
    • Place of Presentation
      旭川
    • Year and Date
      2010-06-16
  • [Presentation] 移動ロボットによる有用な情報検出のための距離画像を用いた人の流れ推定2010

    • Author(s)
      原田大輔, 鈴木崇啓, 原田達也, 國吉康夫
    • Organizer
      日本機械学会ロボティクス・メカトロニクス講演会2010(Robomec2010)
    • Place of Presentation
      旭川
    • Year and Date
      2010-06-16
  • [Presentation] Investigating Pedestrian Detection Performance Using Gradient-Based Features in Outdoor Scenes2010

    • Author(s)
      Masamichi Shimosaka, Atsunori Moteki, Taketoshi Mori, Tomomasa Sato
    • Organizer
      The First International Workshop on Human Behavior Sensing
    • Place of Presentation
      Kassel, Germany
    • Year and Date
      2010-06-15
  • [Presentation] A Method for Analyzing Fast Rotational Movement using Multiple 6-axial Acceleromeiers2010

    • Author(s)
      Kohei Matsumura, Tomoyuki Yamamoto
    • Organizer
      The First Workshop on Human Behavior Sensing 2010 (HBS2010)
    • Place of Presentation
      カッセル(ドイツ)
    • Year and Date
      2010-06-15
  • [Presentation] 複数人への聞き込みから記事を作成するロボットシステム2010

    • Author(s)
      別所史浩, 鈴木崇啓, 原田達也, 國吉康夫
    • Organizer
      日本機械学会ロボティクス・メカトロニクス講演会2010(Robomec2010)
    • Place of Presentation
      旭川
    • Year and Date
      2010-06-15
  • [Remarks]

    • URL

      http://www.isi.imi.i.u-tokyo.ac.jp/publication.php

URL: 

Published: 2012-07-19  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi