2023 Fiscal Year Research-status Report
暗号カメラと暗号画像認識によるセンサレベルビジュアルプライバシー保護
| Project/Area Number |
20K20628
|
|---|
| Research Institution | Osaka University |
|---|
Principal Investigator |
長原 一 大阪大学, データビリティフロンティア機構, 教授 (80362648)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
香川 景一郎 静岡大学, 電子工学研究所, 教授 (30335484)
日浦 慎作 兵庫県立大学, 工学研究科, 教授 (40314405)
|
|---|
| Project Period (FY) |
2020-07-30 – 2025-03-31
|
| Keywords | コンピュテーショナルフォトグラフィ / ディープオプティクス / プライバシー |
|---|
| Outline of Annual Research Achievements |
Society5.0社会実現が叫ばれる中、ビッグデータ活用はサイバースペースにとどまらず、実世界でのユーザの行動履歴をカメラなどで取得し、活用することが期待されている。現在、携帯電話やスマートスピーカなどの様々なIoT機器はカメラを搭載し、深層学習による画像認識の精度が向上したことから、このような実世界情報のセンシングや活用が現実味を帯びてきている。一方で、カメラで人を観測することでのプライバシー問題も社会問題化している。本研究ではセンサ(撮像素子)上の光学像そのものをスクランブルする暗号カメラを提案する。センサでのサンプリング前にシーンを第三者に理解できない形へ光学的にスクランブル化し，符号化読み出しを行うことで、画像がデジタル化される前のセンサレベルでのビジュアルプライバシー保護を実現する。また、暗号カメラで撮影された暗号画像から復元を介さず、直接認識する新たな画像認識フレームワーク「暗号画像認識」を提案し、そのモデルや学習手法についての研究をおこなう。これまでのカメラは、レンズにより像をセンサ面に集光し、ぼけのない画像輝度を均一な矩形配置の画素でサンプリングすることを前提に設計されてきた。本研究で提案する暗号カメラは、レンズを用いず光学マスクによりスクランブルし、ランダムや加算読み出しをおこなうことから、従来のインパルスサンプリングやナイキストサンプリングとは全く異なる新たなセンシングアプローチの提案であると言える。さらには、従来の暗号化は、デジタル化されたものを前提としてきたが、光学系や電子回路を用いたアナログ的暗号化を行う点も斬新である。さらには、画像をデジタル化する前に暗号化するセンサレベルのプライバシー保護を提案している点が、これまでなかった画期的な点である。
|
| Current Status of Research Progress |
Current Status of Research Progress
2: Research has progressed on the whole more than it was originally planned.
Reason
光学系のシミュレーションにより生成したボケた画像を用いたアクション認識を行い，ボケと認識の新たなトレードオフを実現することを実証した．本年度は，これをハードウェアに組み込み実画像にて検証をおこなう．
|
| Strategy for Future Research Activity |
前年度に行った光学シミュレーションの結果をもとにレンズや光学系を設計し，実際にボケた画像を撮影する光学系を構築する．この光学系を用いて実シーンを撮影して，実際にシミュレーションと同様の結果が得られるかの検証を行う．これらを論文としてまとめて，国際会議にて発表を行う．
|
| Causes of Carryover |
実実験のためのカメラの作成が年度ないに終了しなかったため，このための部品代や実験に関わる費用を繰り越した．
|
