Research on comfortable input interfaces using high speed vision

• Project/Area Number: 19680010
• Research Category: Grant-in-Aid for Young Scientists (A)
• Allocation Type: Single-year Grants
• Research Field: Perception information processing/Intelligent robotics
• Research Institution: The University of Tokyo
• Principal Investigator: KOMURO Takashi The University of Tokyo, 大学院・情報理工学系研究科, 講師 (10345118)
• Project Period (FY): 2007 – 2009
• Project Status: Completed (Fiscal Year 2009)
• Budget Amount: ¥24,700,000 (Direct Cost: ¥19,000,000、Indirect Cost: ¥5,700,000); Fiscal Year 2009: ¥8,840,000 (Direct Cost: ¥6,800,000、Indirect Cost: ¥2,040,000); Fiscal Year 2008: ¥8,710,000 (Direct Cost: ¥6,700,000、Indirect Cost: ¥2,010,000); Fiscal Year 2007: ¥7,150,000 (Direct Cost: ¥5,500,000、Indirect Cost: ¥1,650,000)
• Keywords: コンピュータビジョン / HCI / ビジョンチップ / 携帯端末 / 高フレームレート

Research Abstract

In this research, aiming to realize comfortable input interfaces for various information devices using high frame rate cameras which go over the video frame rate, and we built the following systems: 1)In-air mouse/keyboard for mobile devices, 2)Zooming touch panel, 3)Lip-reading interface, 4)Handy 3D scanner.

Research Products

• [Presentation] Vision-based Input Interface for Mobile Devices with High-speed Fingertip Tracking (2009)
  • Author(s): Yuki Hirobe, Takehiro Niikura, Yoshihiro Watanabe, Takashi Komuro, Masatoshi Ishikawa
  • Organizer: 22nd ACM Symposium on User Interface Software and Technology (UIST2009)
  • Year and Date: 2009-10-05
• [Presentation] Vision-based Input Interface for Mobile Devices with High-speed Fingertip Tracking (2009)
  • Author(s): Yuki Hirobe, Takehiro Niikura, Yoshihiro Watanabe, Takashi Komuro, Masatoshi Ishikawa
  • Organizer: 22nd ACM Symposium on User Interface Software and Technology(UIST2009)
  • Place of Presentation: カナダビクトリア
  • Year and Date: 2009-10-05
• [Presentation] 単眼カメラを用いた携帯機器向け空中タイピングインターフェース (2009)
  • Author(s): 廣部祐樹, 船橋一訓, 新倉雄大, 渡辺義浩, 小室孝, 石川正俊
  • Organizer: 映像情報メディア学会情報センシング研究会・メディア工学研究会
  • Year and Date: 2009-06-16
• [Presentation] 高速ビジョンを用いたビデオモザイキング (2009)
  • Author(s): 山本啓太郎, 小室孝, 石川正俊
  • Organizer: 映像情報メディア学会情報センシング研究会・メディア工学研究会
  • Year and Date: 2009-06-16
• [Presentation] 単眼カメラを用いた携帯機器向け空中タイピングインターフェース (2009)
  • Author(s): 廣部祐樹, 船橋一訓, 新倉雄大, 渡辺義浩, 小室孝, 石川正俊
  • Organizer: 映像情報メディア学会 情報センシング研究会・メディア工学研究会
  • Place of Presentation: 金沢
  • Year and Date: 2009-06-16
• [Presentation] 高速ビジョンを用いたビデオモザイキング (2009)
  • Author(s): 山本啓太郎, 小室孝, 石川正俊
  • Organizer: 映像情報メディア学会 情報センシング研究会・メディア工学研究会
  • Place of Presentation: 金沢
  • Year and Date: 2009-06-16
• [Presentation] Fast Finger Tracking System for In-air Typing Interface (2009)
  • Author(s): Kazuhiro Terajima, Takashi Komuro, Masatoshi Ishikawa
  • Organizer: The 27th Annual CHI Conference on Human Factors in Computer Systems (CHI2009)
  • Year and Date: 2009-04-07
• [Presentation] PTZ Control with Head Tracking for Video Chat (2009)
  • Author(s): Kota Yamaguchi, Takashi Komuro, Masatoshi Ishikawa
  • Organizer: The 27th Annual CHI Conference on Human Factors in Computer Systems (CHI2009)
  • Year and Date: 2009-04-07
• [Presentation] Fast Finger Tracking System for In-air Typing Interface (2009)
  • Author(s): Kazuhiro Teraiima, Takashi Komuro, Masatoshi Ishikawa
  • Organizer: The 27th Annual CHI Conference on Human Factors in Computer Systems (CHI2009)
  • Place of Presentation: ボストン,アメリカ
  • Year and Date: 2009-04-07
• [Presentation] 顔追跡によるPTZ操作と魚眼パノラマへの応用 (2009)
  • Author(s): 山口光太, 小室孝, 石川正俊
  • Organizer: 情報処理学会インタラクション2009
  • Year and Date: 2009-03-05
• [Presentation] 遠隔カメラ映像のための覗き込みインタフェース (2008)
  • Author(s): 山口光太, 渡辺義浩, 小室孝, 石川正俊
  • Organizer: 第13回映像メディア処理シンポジウム(IMPS2008)
  • Year and Date: 2008-10-31
• [Presentation] 高速ビジョンを用いた特徴点追跡による3次元形状復元 (2008)
  • Author(s): 山本啓太郎, 山口光太, 渡辺義浩, 小室孝, 石川正俊
  • Organizer: 電子情報通信学会2008年総合大会
  • Year and Date: 2008-03-21
• [Presentation] 高フレームレートカメラとFPGAによる空中タイピングシステムの構築 (2008)
  • Author(s): 寺嶋一浩, 小室孝, 石川正俊
  • Organizer: 動的画像処理実利用化ワークショップ2008
  • Year and Date: 2008-03-07
• [Presentation] 高速ビジョンを用いた空中タイピング動作の認識 (2007)
  • Author(s): 寺嶋一浩, 岩下貴司, 小室孝, 石川正俊
  • Organizer: 第13回画像センシングシンポジウム
  • Year and Date: 2007-06-07
• [Presentation] A High-Speed and Compact Vision System Suitable for Wearable Man-machine Interfaces (2007)
  • Author(s): Takashi Komuro, Bjorn Werkmann, Takashi Komai, Masatoshi Ishikawa, Shingo Kagami
  • Organizer: IAPR 10th Conference on Machine Vision Applications
  • Year and Date: 2007-05-17
• [Remarks]
  • URL: http://www.k2.t.u-tokyo.ac.jp/vision/index-j.html
• [Remarks] 研究成果に関するWebページ
  • URL: http://www.k2.t.u-tokyo.ac.jp/vision/index-j.html
• [Patent(Industrial Property Rights)] 画像表示装置 (2009)
  • Inventor(s): 小室孝、福岡功慶、石川正俊、廣川新、高橋真
  • Industrial Property Rights Holder: 国立大学法人東京大学、株式会社PFU
  • Filing Date: 2009-02-28
• [Patent(Industrial Property Rights)] 画像表示装置 (2007)
  • Inventor(s): 小室孝、福岡功慶、石川正俊、廣川新、高橋真
  • Industrial Property Rights Holder: 国立大学法人東京大学、株式会社PFU
  • Industrial Property Number: 2007-049062
  • Filing Date: 2007-02-28