研究課題/領域番号 |
22K04084
|
研究種目 |
基盤研究(C)
|
配分区分 | 基金 |
応募区分 | 一般 |
審査区分 |
小区分21020:通信工学関連
|
研究機関 | 筑波大学 |
研究代表者 |
鈴木 大三 筑波大学, システム情報系, 准教授 (30615498)
|
研究期間 (年度) |
2022-04-01 – 2025-03-31
|
研究課題ステータス |
交付 (2022年度)
|
配分額 *注記 |
4,030千円 (直接経費: 3,100千円、間接経費: 930千円)
2024年度: 1,040千円 (直接経費: 800千円、間接経費: 240千円)
2023年度: 1,170千円 (直接経費: 900千円、間接経費: 270千円)
2022年度: 1,820千円 (直接経費: 1,400千円、間接経費: 420千円)
|
キーワード | RAW画像 / 圧縮符号化 / スペクトル空間変換 / 生成的画像インペインティング / RAWデータ / カラーフィルタアレイ / 非相関化 / 画像符号化 |
研究開始時の研究の概要 |
RAW画像は,豊富な色数や高ビット深度といった大量の情報を保持し,後処理で様々なニーズに応えられるため,写真家やデザイナーなどのハイエンドユーザから一般ユーザにまで広く使用される.しかし符号化形式が未だ確立しておらず,ファイルサイズはJPEGを始めとする標準規格で圧縮(符号化)されたファイルの何倍にも膨れ上がり,通信帯域やサーバ容量を圧迫している.本研究では,RAW画像をより非相関化する一般化スペクトル空間変換(SST)を創出し,SSTと標準規格との融合による新たなRAW画像符号化を確立する.
|
研究実績の概要 |
本研究の目的は多様なニーズの溢れる現代において益々注目されるRAW画像を,より効率良く圧縮符号化する新たな技術の創出と確立である.前半期では,RAW画像をより非相関化する一般化スペクトル空間変換(SST:Spectral-Spatial Transform)を創出することを計画している.3年計画の内の初年度であった2022年度では,低演算低レイテンシな標準規格であるJPEG XSのために開発されたSSTであるStar-Tetrix変換(STT:Star-Tetrix Trasnform)を元に,より柔軟な変換を行える拡張STT(XSTT:eXtended STT)を提案した.XSTTは2020年に発表したウェーブレットSST(WSST:Wavelet-based SST)における第4のWSSTと捉えることが可能であり,結果として従来のSSTを4つの一般化SSTとしてまとめることに成功したといえる.また,より効果的な変換を実現するための改善方法として,画像のエッジ方向を加味するWSST(WWSST:Weighted WSST)を新たに提案した.これらの成果は,当該分野トップジャーナルであるIEEE Transactions on Image Processingや当該分野トップカンファレンスであるIEEE International Conference on Acoustics, Speech, & Signal Processing (ICASSP) 2022にも採択され,高く評価された.そしてこれらの成果については国内研究会第37回信号処理シンポジウムでも発表し,多くの研究者と議論し,次の研究への糸口を掴むこととなった. 一方で,RAW画像をフルカラー画像として利用するためにはデモザイキングという画素の補完処理が必要となる.この処理はSSTにおける予測ステップに密接な関係があるため,その技術の進展が必要と考え,深層学習に基づく生成的画像インペインティングの研究も同時に進めている.この一つの成果についても,国内研究会第37回信号処理シンポジウムで発表した.
|
現在までの達成度 (区分) |
現在までの達成度 (区分)
2: おおむね順調に進展している
理由
前半期では,RAW画像をより非相関化する一般化SSTを創出することを計画している.研究実績の概要にも記載のとおり,その3年計画の内の初年度であった2022年度において,XSTTを提案し,2020年に発表した研究成果と合わせることで,従来のSSTを4つの一般化SSTとしてまとめることに成功したといえる.また,同時に生成的画像インペインティングの研究を始め,徐々に成果が出てきているところである.
|
今後の研究の推進方策 |
従来のSSTを4つの一般化SSTとしてまとめることに成功したが,あくまでこれはいわゆるBayer配列と呼ばれるカラーフィルタアレイ(CFA)に基づくRAW画像のための変換である.今後は配列パターンに捉われず,またRGB3色以外の色も含むCFAに基づくRAW画像への応用も考えていく.同時に,さらなる効率的なSSTも創出していく.また,同時に生成的画像インペインティングの研究も進め,SSTへの応用を考えていく.
|