• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2017 Fiscal Year Annual Research Report

Integration of visual information processing system for spatial perception by motion stereo vision

Research Project

Project/Area Number 15K18044
Research InstitutionTohoku University

Principal Investigator

秋間 学尚  東北大学, 電気通信研究所, 助教 (40707840)

Project Period (FY) 2015-04-01 – 2018-03-31
Keywords運動立体視 / 空間認識 / LSI
Outline of Annual Research Achievements

物の動きや位置関係を把握する空間認識は、自動運転車や自律歩行ロボットを実現する上で必要不可欠である。通常、工学的システムにおいては、画像センサや距離センサの情報を元に空間認識が行われるが、実時間処理のための高速演算には大きな電力消費を伴う。一方生物は、主に視覚情報を頼りに極めてエネルギー効率のよい空間認識を行っている。例えば昆虫や鳥も行っている運動立体視では、単眼から得られる情報を使って対象物の素早い動きを認識し、障害物回避などの視覚運動制御を行っている。この運動立体視による空間認識を集積回路(LSI)で実現することが本研究の目的である。
本研究では、ヒトの視覚野における運動立体視の神経回路網モデルの一つである川上・岡本モデルに着目した。本モデルは、複数の視野局所領域において速度ベクトル(局所運動)を検出し、それら局所運動を統合してオプティカルフローを検出することで、接近する物体を構成する平面の衝突時間と方位を検出する。本研究計画の初年度と次年度においては、局所運動の検出と統合を行うLSIをそれぞれ試作した。最終年度にあたる平成29年度では、これらのLSIを用いた空間認識システムの構築を行った。
LSIをFPGA(Field Programmable Gate Array)と接続するためのプリント基板を作成し、CameraLinkカメラで取得したライブ動画像をFPGA経由でLSIに入力し、LSIからの出力をFPGA経由でPCに表示するシステムを構築し、複数の視野局所領域の局所運動をリアルタイム(毎秒30フレーム)で検出することに成功した。また、カメラを電車模型に搭載し、ランダムドットパターンが描かれた平面に対して一定速度で接近させることで、平面の接近と傾きに対応するオプティカルフローを検出することに成功した。

  • Research Products

    (27 results)

All 2018 2017 Other

All Int'l Joint Research (1 results) Journal Article (5 results) (of which Peer Reviewed: 5 results) Presentation (21 results) (of which Int'l Joint Research: 14 results,  Invited: 2 results)

  • [Int'l Joint Research] Polytechnic University of Catalonia(Spain)

    • Country Name
      Spain
    • Counterpart Institution
      Polytechnic University of Catalonia
  • [Journal Article] Carrier properties of B atomic-layer-doped Si films grown by ECR Ar plasma-enhanced CVD without substrate heating2017

    • Author(s)
      M. Sakuraba, K. Sugawara, T. Nosaka, H. Akima, S. Sato
    • Journal Title

      Science and Technology of Advanced Materials

      Volume: 18 Pages: 294-306

    • DOI

      10.1080/14686996.2017.1312520

    • Peer Reviewed
  • [Journal Article] Electrical Properties and B Depth Profiles of In-Situ B Doped Si Film Grown by ECR Ar Plasma CVD without Substrate Heating2017

    • Author(s)
      K. Motegi, N. Ueno, M. Sakuraba, Y. Osakabe, H. Akima, S. Sato
    • Journal Title

      Materials Science in Semiconductor Processing

      Volume: 70 Pages: 50-54

    • DOI

      10.1016/j.mssp.2016.10.030

    • Peer Reviewed
  • [Journal Article] Electronic Properties of Si/Si-Ge Alloy/Si(100) Heterostructures Formed by ECR Ar Plasma CVD without Substrate Heating, Materials Science in Semiconductor Processing2017

    • Author(s)
      N. Ueno, M. Sakuraba, H. Akima, S. Sato
    • Journal Title

      Materials Science in Semiconductor Processing

      Volume: 70 Pages: 55-62

    • DOI

      10.1016/j.mssp.2016.09.035

    • Peer Reviewed
  • [Journal Article] Silicon-Carbon Alloy Film Formation on Si(100) Using SiH4 and CH4 Reaction under Low-Energy ECR Ar Plasma Irradiation2017

    • Author(s)
      S. Sasaki, M. Sakuraba, H. Akima, S. Sato
    • Journal Title

      Materials Science in Semiconductor Processing

      Volume: 70 Pages: 188-192

    • DOI

      10.1016/j.mssp.2016.10.046

    • Peer Reviewed
  • [Journal Article] Quantum Associative Memory with Quantum Neural Network via Adiabatic Hamiltonian Evolution2017

    • Author(s)
      Y. Osakabe, H. Akima, M. Sakuraba, M. Kinjo, S. Sato
    • Journal Title

      IEICE Transactions on Information and Systems

      Volume: E100-D Pages: 2683-2689

    • DOI

      10.1587/transinf.2017EDP7138

    • Peer Reviewed
  • [Presentation] Epitaxy and In-Situ Doping of Group-IV Semiconductors by Low-Energy Plasma CVD for Nanoelectronics2018

    • Author(s)
      M. Sakuraba, H. Akima, S. Sato
    • Organizer
      11th Int. WorkShop on New Group IV Semiconductor Nanoelectronics
    • Int'l Joint Research / Invited
  • [Presentation] Crystallinity Improvement in B-Doped Si and Its Influence upon Si-Ge p+-n Junctions Formed by ECR Ar Plasma CVD2018

    • Author(s)
      W. Li, N. Kato, M. Sakuraba, H. Akima, S. Sato
    • Organizer
      11th Int. WorkShop on New Group IV Semiconductor Nanoelectronics
    • Int'l Joint Research
  • [Presentation] Epitaxial Growth of In-Situ P-Doped Si Films by ECR Ar Plasma CVD without Substrate Heating2018

    • Author(s)
      N. Kato, W. Li, M. Sakuraba, H. Akima, S. Sato
    • Organizer
      11th Int. WorkShop on New Group IV Semiconductor Nanoelectronics
    • Int'l Joint Research
  • [Presentation] Hebbian and anti-Hebbian learning for a qunatum associative memory2018

    • Author(s)
      S. Sato, Y. Osakabe, H. Akima, M. Sakuraba
    • Organizer
      The 6th RIEC International Symposium on Brain Functions and Brain Computer
    • Int'l Joint Research
  • [Presentation] Design considerations for real-time digital architectures emulating spiking neural models2018

    • Author(s)
      J. Madrenas, M. Zapata, H. Akima, S. Sato
    • Organizer
      The 6th RIEC International Symposium on Brain Functions and Brain Computer
    • Int'l Joint Research
  • [Presentation] Synchronization of spontaneous activity in modular neuronal network models2018

    • Author(s)
      S. Moriya, H. Yamamoto, H. Akima, S. Kubota, M. Niwano, A. Hirano-Iwata, S. Sato
    • Organizer
      The 6th RIEC International Symposium on Brain Functions and Brain Computer
    • Int'l Joint Research
  • [Presentation] Spatial perception system based on motion stereo vision in cortex2018

    • Author(s)
      S. Kurihara, H. Akima, S. Kawakami, J. Madrenas, S. Moriya, M. Yano, K. Nakajima, M. Sakuraba, S. Sato
    • Organizer
      The 6th RIEC International Symposium on Brain Functions and Brain Computer
    • Int'l Joint Research
  • [Presentation] Vision LSI for Spatial Perception Based on Motion Stereo Vision2018

    • Author(s)
      H. Akima, S. Kurihara, S. Moriya, S. Kawakami, J. Madrenas, M. Yano, K. Nakajima, M. Sakuraba, S. Sato
    • Organizer
      The 5th International Symposium on Brainware LSI
    • Int'l Joint Research
  • [Presentation] Neuro-inspired Quantum Learning Rule Inspired by Boltzmann Machine2018

    • Author(s)
      Y. Osakabe, H. Akima, M. Sakuraba, M. Kinjo, S. Sato
    • Organizer
      APS March Meeting 2018
    • Int'l Joint Research
  • [Presentation] ECR ArプラズマCVDにより形成したSi-Ge系p+-n接合へのBドープSiの結晶性改善の影響2018

    • Author(s)
      李武, 上野尚文, 加藤永史, 櫻庭政夫, 秋間学尚, 佐藤茂雄
    • Organizer
      第65回応用物理学会春季学術講演会
  • [Presentation] 運動立体視に基づき空間を認識する視覚情報処理システム2018

    • Author(s)
      栗原祥太,秋間学尚,川上進,Jordi Madrenas, 守谷哲、矢野雅文、中島康治、櫻庭政夫、佐藤茂雄
    • Organizer
      電子情報通信学会ニューロコンピューティング研究会
  • [Presentation] Neuro-inspired Quantum Associative Memory Using Adiabatic Hamiltonian Evolution2017

    • Author(s)
      Y. Osakabe, S. Sato, H. Akima, M. Sakuraba, M. Kinjo
    • Organizer
      Joint Conf. on Neural Networks (IJCNN 2017)
    • Int'l Joint Research
  • [Presentation] Modularity-Dependent Modulation of Synchronized Bursting Activity in Cultured Neuronal Network Models2017

    • Author(s)
      S. Moriya, H. Yamamoto, H. Akima, A. Hirano-Iwata, M. Niwano, S. Kubota, S. Sato
    • Organizer
      Joint Conf. on Neural Networks (IJCNN 2017)
    • Int'l Joint Research
  • [Presentation] Complexity Reduction of Neural Network Model for Local Motion Detection in Motion Stereo Vision2017

    • Author(s)
      H. Akima, S. Kawakami, J. Madrenas, S. Moriya, M. Yano, K. Nakajima, M. Sakuraba, S. Sato
    • Organizer
      Int. Conf. on Neural Information Processing (ICONIP 2017)
    • Int'l Joint Research
  • [Presentation] Comparison between Ising Hamiltonian and Neuro-inspired Hamiltonian for Quantum Associative Memory, Abs. Adiabatic Quantum Computing2017

    • Author(s)
      Y. Osakabe
    • Organizer
      Conference 2017 (AQC 2017)
    • Int'l Joint Research
  • [Presentation] Neuro-inspired Quantum Associative Memory Model2017

    • Author(s)
      Y. Osakabe, H. Akima, M. Sakuraba, M. Kinjo, S. Sato
    • Organizer
      The 30th International Symposium on Superconductivity (ISS2017)
    • Int'l Joint Research
  • [Presentation] Si系半導体デバイス高性能化に向けたSi/Si-Ge 混晶ヘテロ接合形成プロセスに関する研究2017

    • Author(s)
      李武, 上野尚文, 加藤永史, 櫻庭政夫, 秋間学尚, 佐藤茂雄
    • Organizer
      第72回応用物理学会東北支部学術講演会
  • [Presentation] 運動立体視の神経回路網モデルに基づいた空間認識システムの構築2017

    • Author(s)
      栗原祥太,秋間学尚,川上進,Jordi Madrenas, 守谷哲、矢野雅文、中島康治、櫻庭政夫、佐藤茂雄
    • Organizer
      電子情報通信学会ニューロコンピューティング研究会
  • [Presentation] モジュール構造型神経回路モデルにおける同期活動のメカニズム2017

    • Author(s)
      守谷哲, 山本英明, 井手克哉, 秋間学尚, 平野愛弓, 庭野道夫, 久保田繁, 佐藤茂雄
    • Organizer
      電子情報通信学会ニューロコンピューティング研究会
  • [Presentation] アナログスピントロニクス素子とその人工神経回路網応用2017

    • Author(s)
      秋間学尚, William Borders, 深見俊輔, 守谷哲, 栗原祥太, Aleksandr Kurenkov, 堀尾喜彦, 佐藤茂雄, 大野英男
    • Organizer
      電子情報通信学会マルチメディアストレージ研究会
    • Invited
  • [Presentation] Local motion detection LSI based on motion stereo vision in cortex2017

    • Author(s)
      S. Kurihara, S. Kawakami , J. Madrenas, S. Moriya, M. Yano, K. Nakajima, M. Sakuraba, S. Sato
    • Organizer
      第27回 日本神経回路学会全国大会

URL: 

Published: 2018-12-17  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi