• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2022 Fiscal Year Research-status Report

ブロックチェーンにおける高性能画像解析を用いた自動運転支援システムの開発

Research Project

Project/Area Number 20K11790
Research InstitutionThe University of Tokushima

Principal Investigator

宋 天  徳島大学, 大学院社会産業理工学研究部(理工学域), 准教授 (10380130)

Co-Investigator(Kenkyū-buntansha) 島本 隆  徳島大学, 大学院社会産業理工学研究部(理工学域), 教授 (20170962)
片山 貴文  徳島大学, 大学院社会産業理工学研究部(理工学域), 助教 (70848522)
Project Period (FY) 2020-04-01 – 2024-03-31
KeywordsVVC / Blockchain / 自動運転 / 画像認識
Outline of Annual Research Achievements

本研究は、次世代の自動運転の実用化に向け、5G環境における自動運転を支援するための高安全性フレームワークを提案し、信号機に装備した高機能イメージセンサーを用いた画像解析システムを開発し、自動運転車両を支援する。
実績としては、ブロックチェーンの導入や、その導入に関するセキュリティ関連の問題は解決した。また、認識用のシステムを構築し、様々なシミュレーションを行なった。コロナー禍のなかで交差点でのデータ採取がなかなか実現できなかったため、遷移学習の導入により性能の向上を検証する作業ができなかった。研究室で実施できる内容を検討し、交差点に設置した複数のカメラ間の認識性能の補完手法を開発し、高い認識性能を実現した。提案手法と他の提案を比べても優れている手法を採用し、他の良い手法も取り入れることを考えている。画像圧縮に関しては、VVCを用いて交差点映像の背景不変性と昼夜映像の特徴を利用した手法を考案した。この手法は圧縮効率の向上だけでなく、昼間と夜間の映像の特徴を捉えた手法を提案できたため、この手法を認識性能の補完にも期待できる。
交差点映像に特化したデータセットを作成し、交差点の映像に対して、走行車両、歩行者、歩道、道路を高速かつ高性能なセグマンテーションを実現した。
また、国際会議に参加する機会が少なかったが、研究成果を研究論文にまとめ、複数発表した。特に、IEEE Internet of Things Journal、IEEE Communications Surveys and Tutorialsに掲載された論文が、この研究で得られた成果をまとめ、その新規性と有効性が高く評価された。

Current Status of Research Progress
Current Status of Research Progress

3: Progress in research has been slightly delayed.

Reason

概ね当時の予定通りに実施してきたが、遅れている部分もある。ブロックチェーンの導入や、その導入に関するセキュリティ関連の問題を解決した。特に交差点における画像認識性能について今年で色々検討することができたため、画像認識手法の提案について順調に進めることができた。
遷移学習の性能を検証するために実データの採取が必要になるが、学生の登校制限や、戸外作業の不便により、予定していたデータ収集作業は少ししか進められなかったため、主に研究室での研究を行なってきた。豊富なアイディアから新しいアルゴリズムの検討を続けながら、この分野の新しい提案を吸収し優れたアルゴリズムを検証している。
提案システムにおける情報通信では、複数のチャンネルにおけるリアルタイムの動画像通信を保証する必要がある。5Gの環境では、通信速度が著しく高速になるが、膨大な動画像コンテンツを交差点に設置した基地局と付近の車両に転送する必要があり、その映像の保存、転送、解析のすべてが高圧縮率の映像符号化技術に頼る。本研究で考案したシステムには、次世代の動画像符号化標準VVCをベースに、過去の研究成果を踏まえ、高い圧縮効率を実現した。
また、異なるカメラ間の連携処理を実現するために、同一車両に対しての検出率を大幅に向上させる手法を提案した。令和5年度は、残りの作業としてさらにデータ採取を行う予定である。

Strategy for Future Research Activity

令和5年度は、可能な限りデータ採取作業を行う予定である。交差点に定置しているカメラを使用し、対象となる人物や車両の認識精度が不足している原因を分析した結果により、目標オブジェクトの深度情報の推定精度を向上する。特に、映像のみでは天候の変化に弱く、正しく認識できない場合が多い。本研究の先行研究では、遷移学習を用いて各種天候条件の画像を適切に学習することにより、認識性能を大幅に向上した。しかし、距離の遠いオブジェクトに対する認識精度が改善されなかった。本研究が想定したカメラは交差点に定置しているため、背景となる固定物が多く存在している。背景となるオブジェクトの位置と距離を先に推定し、車両と歩行者と背景の相対距離を推定することにより、距離の推定精度を向上できる。
提案システムにブロックチェーンの導入によりセキュリティを確保できたが、動画像データの全てに対してHash演算処理を行い、膨大な演算量が必要となる。本研究は、安全性能を確保しながら、一部のフレームのみに対してHash演算を行うことにより演算量を大幅削減する。具体的に、動画像の中にIフレーム(画面間予測を行わないフレーム)のみに対しHash演算を行うが、そのIフレームが固有の統計情報より導いた結果から次の対象フレームを決定するアルゴリズムを提案する。
また、現在の2カメラ体制で撮影をしてきたが、4台に増やしてさらに精度を上げる可能性を検証する。状況が許す限り、5G環境での実証も確認したい。

Causes of Carryover

予定したデータ採取は次年度に実施することとなり、次年度使用額が生じた。
今後は4台カメラの体制で検証を続けるため、カメラの購入やデータ採取作業を行う予定である。
予定した学会の参加や、論文投稿も遅れているため、令和5年度は国際会議参加の旅費と論文掲載費で残った研究費で支出する予定である。

  • Research Products

    (18 results)

All 2022 Other

All Int'l Joint Research (2 results) Journal Article (4 results) (of which Int'l Joint Research: 4 results,  Peer Reviewed: 4 results) Presentation (12 results) (of which Int'l Joint Research: 12 results)

  • [Int'l Joint Research] Carleton University(カナダ)

    • Country Name
      CANADA
    • Counterpart Institution
      Carleton University
  • [Int'l Joint Research] Shanghai Maritime Unniversity(中国)

    • Country Name
      CHINA
    • Counterpart Institution
      Shanghai Maritime Unniversity
  • [Journal Article] Saliency-Enabled Coding Unit Partitioning and Quantization Control for Versatile Video Coding2022

    • Author(s)
      Li Wei、Jiang Xiantao、Jin Jiayuan、Song Tian、Yu Fei Richard
    • Journal Title

      Information

      Volume: 13 Pages: 394~394

    • DOI

      10.3390/info13080394

    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Intelligent Resource Allocation for Video Analytics in Blockchain-Enabled Internet of Autonomous Vehicles With Edge Computing2022

    • Author(s)
      Jiang Xiantao、Yu F. Richard、Song Tian、Leung Victor C. M.
    • Journal Title

      IEEE Internet of Things Journal

      Volume: 9 Pages: 14260~14272

    • DOI

      10.1109/JIOT.2020.3026354

    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Resource Allocation of Video Streaming Over Vehicular Networks: A Survey, Some Research Issues and Challenges2022

    • Author(s)
      Jiang Xiantao、Yu F. Richard、Song Tian、Leung Victor C. M.
    • Journal Title

      IEEE Transactions on Intelligent Transportation Systems

      Volume: 23 Pages: 5955~5975

    • DOI

      10.1109/TITS.2021.3065209

    • Peer Reviewed / Int'l Joint Research
  • [Journal Article] Biometric-based Remote Mutual Authentication Scheme for Mobile Device2022

    • Author(s)
      Chen Sheng-Kai、Leu Jenq-Shiou、Hsieh Wen-Bin、Wang Jui-Tang、Song Tian
    • Journal Title

      Wireless Personal Communications

      Volume: 126 Pages: 1649~1664

    • DOI

      10.1007/s11277-022-09814-8

    • Peer Reviewed / Int'l Joint Research
  • [Presentation] Coordinate Attention-enabled Ship Object Detection with Electro-optical Image2022

    • Author(s)
      Xu Hongbin, Jiang Xiantao, Yin Tao, Cen Qi, Zhang Zhijian, Tian Song and Yu Richard F.
    • Organizer
      International Conference on Computing and Pattern Recognition
    • Int'l Joint Research
  • [Presentation] Depth Estimation with Sonar-based Correction for Low-cost Underwater Drone2022

    • Author(s)
      Mantani Kota, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      OCEANS2022
    • Int'l Joint Research
  • [Presentation] Object Recognition based Self-Position Estimation for Underwater Robots2022

    • Author(s)
      Tamura Yuma, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      OCEANS2022
    • Int'l Joint Research
  • [Presentation] YOLOX based Underwater Object Detection for Inshore Aquaculture,2022

    • Author(s)
      Imada Atsuki, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      OCEANS2022
    • Int'l Joint Research
  • [Presentation] Investigation of Sensors Related 3D-Mapping Algorithm for Monocular Video based Underwater Vehicles2022

    • Author(s)
      Shotaro Ikeda, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      International Technical Conference on Circuits/Systems, Computers and Communications(ITC-CSCC2022)
    • Int'l Joint Research
  • [Presentation] High-Accuracy Object Detection Using Multi-view Video at Road Intersections2022

    • Author(s)
      Ihara Urumu, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      International Technical Conference on Circuits/Systems, Computers and Communications(ITC-CSCC2022)
    • Int'l Joint Research
  • [Presentation] High Efficiency Dataset Generation for Semantic Video Segmentation on Road Intersection2022

    • Author(s)
      Wataru Nagai, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      International Technical Conference on Circuits/Systems, Computers and Communications(ITC-CSCC2022)
    • Int'l Joint Research
  • [Presentation] A Novel Video Coding Framework with GAN-based Face Generation for Videoconferencing2022

    • Author(s)
      Sohma Nagahara, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      International Technical Conference on Circuits/Systems, Computers and Communications(ITC-CSCC2022)
    • Int'l Joint Research
  • [Presentation] Object Detection in Curved Mirror with Multi-Cameras from Single Viewpoint Video2022

    • Author(s)
      Chihaya Asai, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      International Technical Conference on Circuits/Systems, Computers and Communications(ITC-CSCC2022)
    • Int'l Joint Research
  • [Presentation] Deep Learning-Based Quality Enhancement Algorithms for Background of Video2022

    • Author(s)
      Kei Kobayashi, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      International Technical Conference on Circuits/Systems, Computers and Communications(ITC-CSCC2022)
    • Int'l Joint Research
  • [Presentation] High Efficiency Image Correction for Low Power Underwater Drone2022

    • Author(s)
      Kazuto Shindo, Takafumi Katayama, Tian Song and Takashi Shimamoto
    • Organizer
      International Technical Conference on Circuits/Systems, Computers and Communications(ITC-CSCC2022)
    • Int'l Joint Research
  • [Presentation] Domain Adaptive Semantic Segmentation Through Photorealistic Enhancement of Video Game2022

    • Author(s)
      Nakajima Kaito, Takafumi Katayama, Tian Song, Jiang Xiantao and Takashi Shimamoto
    • Organizer
      IEEE International Conference on Consumer Electronics(ICCE)
    • Int'l Joint Research

URL: 

Published: 2023-12-25  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi