• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2007 Fiscal Year Annual Research Report

動画像より物体の動きの意味を抽出する行動分析VLSIイメージセンサ・システム

Research Project

Project/Area Number 17206030
Research InstitutionThe University of Tokyo

Principal Investigator

柴田 直  The University of Tokyo, 大学院・工学系研究科, 教授 (00187402)

Co-Investigator(Kenkyū-buntansha) 三田 吉郎  東京大学, 大学院・工学系研究科, 准教授 (40323472)
KeywordsVLSI / 生体情報処理 / 動き場生成 / 動作認識 / ジェスチャー認識 / ego-motion認識 / 動きベクトル検出 / エッヂ情報
Research Abstract

本研究は「動作・行動の意味理解」を目指しているが、高精度な動き場の検出が最も基本となる。動画像からの動き場の検出は極めて計算コストが高く、実時間処理実現のため、我々は生体情報処理にヒントを得た独自のハードウェアアルゴリズムを実装したVLSIテップ群を開発した。
前処理として4方向エッジ情報(縦・横・±45°)を抽出するが、対象物の大きさ変化にも柔軟に対応できるよう、可変解像度エッジフィルタ処理VLSIを開発した。このチップは、自己相似演算アーキテクチャと呼ぶ新たな演算方式を採用し、同様の演算をフラクタル的に規模を拡大して行うことにより、1/2、1/4・・と順次解像度を落とした画像に対しエッジ抽出が高速に実行できる。64×64ピクセルのチップを試作し、毎秒500フレーム以上の処理性能を実証した。
こうして抽出したエッジ情報を元に物体認識を行うためには、画像の特徴ベクトル生成が重要であるが、これも従来の我々のアーキテクチャに機能キャッシュメモリと呼ぶ新たな演算ユニットを導入し更なる高速化を実現。従来のチップで、既に汎用CPUの処理に比較して10,000倍の高速化を実現していたが、ハードウェア量の大幅削減とともに、さらに30倍の高速化を達成した。
エッジ情報を基にその空間分布ヒストグラムを生成、フレーム間のシフト&マッチング演算で高速に動き場を生成するVLSIチップを開発した。独自の並列マッチングアーキテクチャにより、動きベクトル検出を画像の任意の位置において、1クロックで連続的に実行できる。20MHzの動作で2.8GHzのCPUでのソフトウェア処理に比較し1000倍以上の高速処理が可能であることを、試作チップの実測により実証した。
また、勲作を表現するための新たなベクトル表現を開発、ego-motionの認識、ジェスチャーの認識等に対し高い確度で実行できることを示した。

  • Research Products

    (19 results)

All 2008 2007

All Journal Article (7 results) (of which Peer Reviewed: 7 results) Presentation (12 results)

  • [Journal Article] Moving-Object-Localization Hardware Algorithm Employing OR-Amplification of Pixel Activities2008

    • Author(s)
      Yusuke Niki, Yasuo Manzawa, Satoshi Kametani, Tadashi Shibata
    • Journal Title

      Japanese Journal of Applied Physics Vol.47, No.4

      Pages: 2767-2773

    • Peer Reviewed
  • [Journal Article] Compact and Power-Efficient Implementation of Rank-Order Filters Using Time-Domain Digital Computation Technique2008

    • Author(s)
      Liem T. Nguyen, Kiyoto Ito, Tadashi Shibata
    • Journal Title

      Japanese Journal of Applied Physics Vol.47, No.4

      Pages: 2807-2811

    • Peer Reviewed
  • [Journal Article] Compact Bell-Shaped Analog Matching-Cell Module for Digital-Memory-Based Associative Processors2008

    • Author(s)
      Trong Tu Bui, Tadashi Shibata
    • Journal Title

      Japanese Journal of Applied Physics Vol.47, No.4

      Pages: 2788-2796

    • Peer Reviewed
  • [Journal Article] 連想プロセッサアーキテクチャに基づく逐次データソーティングVLSI2007

    • Author(s)
      高田謙、早川仁、柴田直
    • Journal Title

      電子情報通信学会論文誌C Vol.J90-C, No.5

      Pages: 417-427

    • Peer Reviewed
  • [Journal Article] Hardware Architecture for Pseudo-Two-Dimemsional Hidden-Markov-Model-Based Face Recognition Systems Employing Laplace Distribution Functions2007

    • Author(s)
      Yasufumi Suzuki, Tadashi Shibata
    • Journal Title

      Japanese Journal of Applied Physics Vol.46, No.4B

      Pages: 2265-2270

    • Peer Reviewed
  • [Journal Article] A Hardware-Implementation-Friendly Pulse-Coupled Neural Network Algorithm for Analog Image-Feature-Generation Circuits2007

    • Author(s)
      Jun Chen, Tadashi Shibata
    • Journal Title

      Japanese Journal of Applied Physics Vol.46, Part 1, No.4B

      Pages: 2271-2277

    • Peer Reviewed
  • [Journal Article] A Real-Time Image-Feature-Extraction and Vector-Generation VLSI Employing Arrayed-Shift-Register Architecture2007

    • Author(s)
      Hideo Yamasaki, Tadashi Shibata
    • Journal Title

      IEEE Journal on Solid State Circuits Vol.42, No.9

      Pages: 2046-2053

    • Peer Reviewed
  • [Presentation] Spatiotemporal Projection of Motion Field Sequence for Generating Feature Vectors in Gesture Perception2008

    • Author(s)
      Hitoshi Hayakawa, Tadashi Shibata
    • Organizer
      The 2008 International Symposium on Circuits and Systems (ISCAS 2008)
    • Place of Presentation
      Seattle, USA
    • Year and Date
      20080518-20080521
    • Description
      「研究成果報告書概要(和文)」より
  • [Presentation] An Analog Self-Similitude Edge-Filtering Processor for Multiple-Resolution Image Perception2008

    • Author(s)
      Norihiro Takahashi, Kazuhide Fujita, Tadashi Shibata
    • Organizer
      The 2008 International Symposium on Circuits and Systems (ISCAS 2008)
    • Place of Presentation
      Seattle, USA
    • Year and Date
      20080518-20080521
    • Description
      「研究成果報告書概要(和文)」より
  • [Presentation] Block-Matching-Based Motion Field Generation Utilizing Directional Edge Displacement2007

    • Author(s)
      Hitoshi Hayakawa, Tadashi Shibata
    • Organizer
      The International Conference on Signal Processing and Communication Systems 2007 (ICSPCS 2007)
    • Place of Presentation
      Gold Coast, Australia
    • Year and Date
      20071217-20071219
    • Description
      「研究成果報告書概要(和文)」より
  • [Presentation] Feature-Based Object Tracking Using Spatial Matching of Differential Directional-Edge Images2007

    • Author(s)
      Sihwan Kim, Tadashi Shibata
    • Organizer
      The International Conference on Signal Processing and Communication Systems (ICSPCS 2007)
    • Place of Presentation
      Gold Coast, Australia
    • Year and Date
      20071217-20071219
    • Description
      「研究成果報告書概要(和文)」より
  • [Presentation] A Real-Time Learning Processor Based on K-means Algorithm with Automatic Seeds Generation2007

    • Author(s)
      Hirotsugu Shikano, Kiyoto Ito, Kazuhide Fujita, Tadashi Shibata
    • Organizer
      The 2007 International Symposium on System-on-Chip (SoC 2007)
    • Place of Presentation
      Tampere, Finland
    • Year and Date
      20071119-20071121
    • Description
      「研究成果報告書概要(和文)」より
  • [Presentation] Mixed-Signal Focal-Plane Image Processor Employing Time-domain Computation Architecture2007

    • Author(s)
      Kiyoto Ito, Tadashi Shibata
    • Organizer
      The 2007 International Symposium on System-on-Chip (SoC 2007)
    • Place of Presentation
      Tampere, Finland
    • Year and Date
      20071119-20071121
    • Description
      「研究成果報告書概要(和文)」より
  • [Presentation] A Feature-Based Optical Flow Processor Architecture Featuring Single-Motion-Vector/Cycle Generation2007

    • Author(s)
      Kazuhide Fujita, Kiyoto Ito, Tadashi Shibata
    • Organizer
      The 2007 International Symposium on System-on-Chip (SoC 2007)
    • Place of Presentation
      Tampere, Finland
    • Year and Date
      20071119-20071121
    • Description
      「研究成果報告書概要(和文)」より
  • [Presentation] A Moving-Object-Localization Hardware Algorithm Employing OR-Amplification of Pixel Activities2007

    • Author(s)
      Yusuke Niki, Yasuo Manzawa, Satoshi Kametani, Tadashi Shibata
    • Organizer
      The 2007 International Conference on Solid State Devices and Materials (SSDM 2007)
    • Place of Presentation
      Tsukuba, Japan
    • Year and Date
      20070918-20070921
    • Description
      「研究成果報告書概要(和文)」より
  • [Presentation] A Compact and Power-Efficient Implementation of Rank Order Filters Using Time-Domain Digital Computation Technique2007

    • Author(s)
      Liem T. Nguyen, Kiyoto Ito, Tadashi Shibata
    • Organizer
      The 2007 International Conference on Solid State Devices and Materials (SSDM 2007)
    • Place of Presentation
      Tsukuba, Japan
    • Year and Date
      20070918-20070921
  • [Presentation] A Compact Bell-Shaped Analog Matching Cell Module for Digital-Memory-Based Associative Processors2007

    • Author(s)
      Trong Tu Bui, Tadashi Shibata
    • Organizer
      The 2007 International Conference on Solid State Devices and Materials (SSDM 2007)
    • Place of Presentation
      Tsukuba, Japan
    • Year and Date
      20070918-20070921
  • [Presentation] A Speed Adaptive Ego-Motion Detection System Using Edge-Histograms Produced by Variable Graduation Method2007

    • Author(s)
      Jia Hao, Tadashi Shibata
    • Organizer
      The 15th European Signal Processing Conference (EUSIPCO 2007)
    • Place of Presentation
      Poznan, Poland
    • Year and Date
      20070903-20070907
  • [Presentation] Validating Directional Edge-Based Image Feature Representations in Face Recognition by Spatial Correlation-Based Clustering2007

    • Author(s)
      Yasufumi Suzuki, Tadashi Shibata
    • Organizer
      The 15th European Signal Processing Conference (EUSIPCO 2007)
    • Place of Presentation
      Poznan, Poland
    • Year and Date
      20070903-20070907

URL: 

Published: 2010-06-11   Modified: 2016-04-21  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi