2023 Fiscal Year Research-status Report

階層化ふるい分けSOMによる画像認識システムに関する研究

Research Project

Project/Area Number	20K11999
Research Institution	Kansai University
Principal Investigator	肥川宏臣関西大学, システム理工学部, 教授 (10244154)
Project Period (FY)	2020-04-01 – 2025-03-31
Keywords	自己組織化マップ / ハードウェアアクセラレータ / 画像認識 / 脳波
Outline of Annual Research Achievements	2023年度は，階層化ふるい分け自己組織化マップ（Self-organizing map: SOM）の認識性能の確認，SOM の演算を高速に行う専用ハードウェアの開発，SOM の新たな応用研究として脳波の分類に関する研究を行った．まず，認識率の改善について，階層化ふるい分け SOM のベースとなる Class-SOM の認識性能の特性を調べた．Class-SOM は認識対象（クラス）ごとに SOM を複数用意して学習を行うが，認識画像を元画像から切り出して，ばらつきを付加した学習データを用いることで認識性能が向上することが明らかになった．対象となる画像データによる違いを調べるため，昨年度と異なるデータセットを用いて実験を行った．専用ハードウェア開発については，前年度までに提案した入れ子構造にしたハードウェアSOMアーキテクチャを国際ジャーナルで発表した．さらに，ハードウェア SOM の性能改善を念頭に置いた SOM の演算に使用される非線形関数のハードウェア設計を行った．従来からハードウェア SOM で用いられてきた2値関数に乱数を加えることで，非線形的な性質を持つ関数となり，SOM の量子化誤差が減少することを明らかにした．階層化ふるい分け自己組織化マップの将来的な応用として，脳波分類の可能性について検討した．先行研究として，単体の SOM を用いて脳波から顔の表情を認識するシステムを開発して評価実験を行った．その結果，予想以上に良好な結果が得られたため，この成果を国際ジャーナルで発表した．
Current Status of Research Progress	Current Status of Research Progress 2: Research has progressed on the whole more than it was originally planned. Reason 提案する階層化ふるい分け自己組織化マップのベースとなる，Class-SOM の認識性能を調べる実験を行った．昨年度，学習データにばらつき付加による認識率の改善を提案している．この効果を調べる実験を指文字（American sign language）データセットを用いて行った．その結果，小規模な SOM でも高い認識率が得られることが明らかになった．ハードウェア SOM の開発については，認識性能の改善につながる量子化誤差を改善する回路の開発を行った．そのために，SOM の改良を行った．簡単なため従来のハードウェア SOM で用いられてきた二値近傍関数に，デザリング（乱数によるノイズを付加する）処理を行う近傍関数を開発した．デザリングにより，二値関数がガウス関数的な非線形特性となることを理論解析により明らかにした．また，プログラム可能な論理素子である FPGA に，提案する近傍関数を持つ SOM を実装することで性能評価を行った．その結果，量子化誤差が減少することを実験で示した．また，回路規模の増加，動作速度の低下もも無視できる程度なことを明らかにした．この成果を国内研究会で発表するとともに，国際ジャーナルに投稿中である．新たな SOM の応用として，BCI (Brain Computer Interface) を想定して，脳波からの信号を用いた顔の表情を認識するシステムを開発した． OpenBCI の Ultracortex Mark IV を用いて脳波を取得し，PC 内で前処理と SOM によるジェスチャ認識を行う認識システムを開発し，認識実験を行った．システムは，ほぼリアルタイムで動作し，認識ジェスチャ数2，4，5，7 で，認識率は，それぞれ 97.6%, 94.4%, 92.7%, 77.0% となった．この成果を国際ジャーナルで発表した．
Strategy for Future Research Activity	学習画像の切り出しをランダムに行うことで認識率の改善が確認できたが，2022 年度の FMNIST データセットに対する認識率改善より，2023年度の指文字データのほうが改善効果が高かった．この結果を考慮して，より一般的な画像データである FMNIST に対する切り出し方法の改善を行い，さらなる認識性能の向上を目指す．そして，改良した切り出し方法を用いた Class-SOM に，研究課題として提案するふるい分けを導入して，最終的な認識率の評価を行う．ハードウェア SOM については，乱数を複数回二値関数に加えた確率的演算による近傍関数を用いることで，さらなる量子化誤差の低減を図る．デザリングを加えた二値近傍関数では，関数値が1となるか０になるかが，引数に比例した確率で決まる．これに対して確率的演算では，デザリングを複数回行う．そのため，関数値はその平均値と考えることができ，関数の引数に比例した０から1の間の値となる．シミュレーションと FPGA 実装実験により，その効果を明らかにする．脳波の認識については，現状のシステムは1回の認識に2～4秒ほどかかる．瞬時に認識が行えるリアルタイム認識システムの開発を行う．また，これと並行して，認識を行う部分を現在のシステムで用いている通常の SOM を ClassSOM, 階層化ふるい分けSOMに置き換えて認識実験を行い，提案する階層化ふるい分けSOMの最終的な評価を行う．
Causes of Carryover	研究代表者の健康上の問題から，国際会議への出席を控えたため，予定していた旅費が不使用となった．また，国際ジャーナルの投稿費が免除となり予定していた研究成果発表の費用が不要となったため，次年度使用が生じた．次年度は，今までの研究成果発表の費用（国際会議，国内会議，国際ジャーナルへの論文掲載と英文校閲等）に充てる計画である．