1996 Fiscal Year Annual Research Report
画像処理による視線/顔の向きの検出とユーザ主体型映像通信の実現
| Project/Area Number |
07455155
|
|---|
| Research Institution | Univ. of Tokyo |
|---|
Principal Investigator |
羽鳥 光俊 東京大学, 大学院・工学系研究科, 教授 (60010790)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
相澤 清晴 東京大学, 大学院・工学系研究科, 助教授 (20192453)
|
|---|
| Keywords | 画像処理 / 視線一致 / 顔の向き / 顔の追跡 / アイコンタクト |
|---|
| Research Abstract |
本研究では、映像を主とする将来のマルチメディア通信においてユーザ主体型の映像通信を実現するための画像処理技術とその実験システムによる検証を目的としている.ユーザの状況を自動的に検知し、映像内容を制御すれば、臨場感を高め直接対話しているような環境を実現可能と考えられる.具体的には、視線の一致の問題といわれるように映像通信の臨場感を左右する一つの重要な要素はユーザの視線や顔の向きであるため、第一に複数人の視線一致を可能とするユーザ主体型映像通信システムの構築を目的としてきた.これまでの検討を以下に記す.
(1) 複数人の視線一致が可能な映像通信システムの構築
テレビ会議での実用上の問題となる視線の自然な一致/不一致を可能とするシステム(MPEC)の構築を行なった。ハーフミラを併せた複数のディスプレイに対してカメラ配置の工夫により複数人同志のテレビ会議にて自然な視線の一致/不一致を与えることができる.2つのプロトタイプを構築した.
(2) ロバストな顔の向き/視線の検出/追跡手法の検討
エッジ情報とデフォーマブルテンプレートを用いた顔の自動追跡の手法を提案し実験検討した.
(3) 複数人の視線一致が可能な映像通信システム(MPEC)の階層化
これまでの,提案・構築したMPECの拡張を図る.その一つとして,視線一致のとれた会議システムMPECの階層化を図る.この階層化により,多数の遠隔サイトの会合を関連のある人とだけ視線一致をとりながら行うことができる.その基本設計と効果を検証した.
(4) 注視点制御手法の検討
Interest Pointの検出は、様々な画像処理にて必要とされる.対称性を考慮したモーメント特徴量により注視すべき点を抽出する手法に関して検討を行なった.
|
-
[Publications] L.C.Desilva,K.Aizawa,M.Hatori: "Detection and tracking of facial features by using edge pixel counting and deformable circular tenplate matching" IEICE Trans,Information and Systems. E78-D. 1195-1207 (1995)
-
[Publications] L.C.Desilva,M.Tahara,K.Aizawa,M.Hatori: "A Teleconferencing system capable of multiple person eye contact (MPEC)" IEEE Trans.Circuit and Systems for video technology. 5. 268-277 (1995)
-
[Publications] L.C.Desilva,M.Tahara,K.Aizawa,M.Hatori: "A Multiple person eye contact (MPEC) teleconferencing system" IEEE Int.Conf.on Image Processing. II. 607-610 (1995)
-
[Publications] L.C.Desilva,K.Aizawa,M.Hatori: "Detection and tracking of facial features" SPIE. 2501. 1161-1172 (1995)
-
[Publications] L.C.Desilva,K.Aizawa,M.Hatori: "A teleconferencing system capable of multiple person eye contact using half mirrors and cauevas placed at common" Int.Conf.on Human Computer Interaction. 20 (1995)
-
[Publications] L.C.Desilva,K.Aizawa: "Multiple Person Eye Contact (MPEC) Teleconferencing System" SPIE Electronic Imaging Newsletter. (1996)
-
[Publications] K,Aizawa(分担執筆): "Video Coding" Kluwer Academic Publishers, 287 (1996)
-
[Publications] K,Aizawa(分担執筆): "Handbook of Visual Communications" Academic Press, 518 (1995)
