| 研究課題/領域番号 |
16300071
|
|---|
| 研究機関 | 芝浦工業大学 |
|---|
研究代表者 |
大関 和夫 芝浦工業大学, 工学部, 教授 (90317363)
|
|---|
| 研究分担者 |
大倉 典子 芝浦工業大学, 工学部, 教授 (00317364)
青木 義満 芝浦工業大学, 工学部, 准教授 (00318792)
原島 博 東京大学, 大学院・情報学環, 教授 (60011201)
橋本 周司 早稲田大学, 理工学部, 教授 (60063806)
|
|---|
| キーワード | 顔画像 / ワイヤフレームモデル / 特徴点 / 合成 / 高精細 / 表情 / 眼球 / 主観評価 |
|---|
| 研究概要 |
前年度に定式化した動き適応テクスチャ合成(Motion Dependent Texture Mapping:MDTM)の詳細化を行った。瞬き動作に特に注目し、開眼から閉眼に至るまでには変形が大きいことを考慮し、テクスチャを単一のものから開閉度に応じ複数用意し、切り換えて行く。単一のテクスチャから各開閉度のテクスチャを生成すると、特徴点の3次元的な動きに加え、2次元テクスチャ上にも鍛の変化があり、現在のモデルでは画質劣化が大きい。各開閉度に応じ、複数のテクスチャを切り換えることにより自然観が大幅に向上した。テクスチャの数としては、現在、4-8枚程度を使用している。通常は4枚程度で十分だが、スローモーション再生では、更に枚数が多い方が良い。従来、(独)マックスプランク研究所でも精密な顔合成がなされて来たが、瞬きは一の事象として、精密な合成でも除外されてきた。本研究では、モデル全体を空間解像度と時間解像度に関しそれぞれ2倍向上させることを目指し、目部分のテクスチャを高速カメラによる多駒入力を行う。標準サイズのテレビでは過剰といえる情報を用意し、処理後に縮小して使用するという過剰な処理により自然感を高めることができた。多駒に関し、購入した高速カメラは解像度が低く、高解像度のカラーカメラを複数用いるマルチカメラシステムにより、多駒化を図ることができた。これは確率的高速カメラ映像入力方式といい、従来はハーフミラーで分光した多眼カメラ方式があったが、減光するという問題点があった。ハーフミラーを使用しない場合は、各カメラの画角が異なり、ズームのサイズも正確には合わないまま撮影される。そこで、画角の差を幾何補正することにより、6台まで増加した実験を行い、スローモーションでの高画質な合成映像の再生を実現してきた。効果は主観評価により有効性を確認した。大画面テレビにより、同時に複数の評価者が評価を行った。
|
