• Search Research Projects
  • Search Researchers
  • How to Use
  1. Back to project page

2012 Fiscal Year Annual Research Report

複合現実型情報空間の表現力基盤強化と体系化

Research Project

Project/Area Number 24220004
Research InstitutionRitsumeikan University

Principal Investigator

田村 秀行  立命館大学, 総合科学技術研究機構, 教授 (10367998)

Co-Investigator(Kenkyū-buntansha) 斎藤 英雄  慶応義塾大学, 理工学部, 教授 (90245605)
西浦 敬信  立命館大学, 情報理工学部, 准教授 (70343275)
柴田 史久  立命館大学, 情報理工学部, 教授 (80314425)
大島 登志一  立命館大学, 映像学部, 教授 (40434708)
木村 朝子  立命館大学, 情報理工学部, 教授 (20324832)
Project Period (FY) 2012-05-31 – 2017-03-31
Keywordsバーチャルリアリティ / 複合現実感 / 三次元音場 / 全天周映像 / 隠消現実感
Research Abstract

従来の基盤研究(A)を継承・発展させる課題(A)と挑戦的萌芽研究の結果に基づき, 新たな技術体系構築を目指す課題(B)に関して, 初年度はそれぞれ以下のような研究を行った.
(A)没入型映像&音像空間での高臨場感複合現実体験
本研究採択により, 仮設Xドームを常設化するに際し, 壁面による音像構築と床面による不要反射音の吸音に取り組み, 定位精度の高い音像表現を達成した. 特に床面は, 視聴覚MR体験者の歩行時の安全性と吸音効率を両立できる構造を採用した. また, 音像プラネタリウム基本ユニットは, サブウーファを導入することで音像の高音質化を図った.
(B)隠消現実感の要素技術開発と技術体系構築
(B-1)静的な隠背景情報を利用するDR
DR技術体系の構築を目指して, 様々な体験環境に適応できるよう, 系統的なDR基礎実験可能なスタジオを設け, そこで取得できる映像データの公開をめざす. 初年度は, この実験スタジオの仕様を検討し, 既存の映画撮影スタジオの改造・整備に着手した. DR実現の要素技術としては, まず隠背景面を平面近似できる対象から始め, 重畳領域の境界をモザイキング処理で整形する手法を開発した.
(B-2)動的な隠背景情報を利用するDR
ライブ透視型DRの実現のために, 複数のカラー・カメラを並列利用した動的な隠背景除去手法を提案し, その有効性を確認した. より効果的に動的な隠背景を取得するためにRGB-Dカメラを利用し, スマートフォンと連携してスマートフォン上でDR透視映像を鑑賞可能なシステムのための要素技術として, RGB-Dカメラにより撮影された3次元構造とスマートフォンの2次元画像の対応関係から, その位置姿勢をリアルタイム推定する技術開発を行った, また並行して, カメラ位置姿勢トラッキング技術, プロジェクタ利用型MR情報提示のトラッキング技術等の要素技術も研究した.

Current Status of Research Progress
Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

課題(A)では, MR体験空間であるXドームの常設化は, H25年度にずれ込む予定であったが, 床面での吸音構造の実現, サブウーファの導入による高音質化の両方が, 計画以上に順調に推移したため, H24年度内にこれを完了することができた.
課題(B-1)は, 系統的実験環境の技術的検討も要素技術開発も, ほぼ計画通り順調に推移した.
課題(B-2)は, 複数平面走査方式, デプスカメラ併用方式ともに検討は順調で, 方式はほぼ確立したと言える. ただし, 実験データを積み重ねて有用性の限界を確認する実験は, 予定した要員の転出により, 一部が完了できなかった.
以上のように, 一部は当初計画以上, 一部が実験期間の延長のため, 全体としては「概ね順調に進展している」と言える.

Strategy for Future Research Activity

・課題(A)は, 計画を早めてXドームの常設化を達成したので, 音ドーム床面に設置した残響制御用の間接スピーカを用いて, ドーム内の臨場感を向上させる残響制御手法を検討する. また, 移動音像の構築に向けて, 球面超音波スピーカユニットの設計・構築に着手する. また, 映像側の研究成果を活かした視聴覚MRコンテンツの開発にも着手する.
・課題(B-1)のDR実験スタジオは, 技術的検討の結果, 本格的実施には大学本部建物内で不十分であることが判明したため, H25年度に京都リサーチパーク内に移転し, 環境整備・運用をめざすことにした
・課題(B-2)は, 動的隠背景の取得のための動的3次元構築手法をさらに進め, より複雑な3次元形状をリアルタイム復元し, ライブ透過型DRの実現可能な方式を開発する. さらに, 復元された3D形状に基づいたカメラ位置姿勢のリアルタイム推定技術を開発し, これをスマートフォンやタブレット端末上に実装してライブ透過型DR表示を可能にする.

  • Research Products

    (36 results)

All 2013 2012

All Journal Article (6 results) (of which Peer Reviewed: 6 results) Presentation (30 results)

  • [Journal Article] パラメトリヅクスピーカのためのスペクトル包絡に基づく復調評価指標の策定2013

    • Author(s)
      生藤大典, 中山雅人, 西浦敬信
    • Journal Title

      電子情報通信学会論文誌(D)

      Volume: Vol.96-D, No.3 Pages: 655-663

    • Peer Reviewed
  • [Journal Article] 複数のスマートフォンカメラの協調利用による実時間隠消現実感2012

    • Author(s)
      本田俊博, 斎藤英雄
    • Journal Title

      日本バーチャルリアリティ学会論文誌

      Volume: Vol.17, No.3 Pages: 181-190

    • Peer Reviewed
  • [Journal Article] 線分記述子(LEHF)を用いた実時間SLAM2012

    • Author(s)
      廣瀬圭佑, 斎藤英雄
    • Journal Title

      日本バーチャルリアリティ学会論文誌

      Volume: Vol.17, No.3 Pages: 201-208

    • Peer Reviewed
  • [Journal Article] 実世界の撮影現場で3D映画演出を事前検討できるMR-PreVizシステムの開発2012

    • Author(s)
      森尚平, 一刈良介, 柴田史久, 木村朝子, 田村秀行
    • Journal Title

      日本バーチャルリアリティ学会論文誌

      Volume: Vol.17, No.3 Pages: 231-240

    • Peer Reviewed
  • [Journal Article] マーカレス・カメラ・トラッキングを強化するリハーサル・パス法とその実世界運用2012

    • Author(s)
      一刈良介, 永仮貴浩, 津村勇毅, 北村一博, 柴田史久, 田村秀行
    • Journal Title

      日本バーチャルリアリティ学会論文誌

      Volume: Vol.17, No.3 Pages: 241-252

    • Peer Reviewed
  • [Journal Article] Three-dimensional acoustic sound field reproduction based on hybrid combination of multiple parametric loudspeakers and electrodynamic subwoofer2012

    • Author(s)
      Yutaro Sugibayashi, Sota Kurimoto, Daisuke Ikefuji, Masanori Morise and Takanobu Nishiura
    • Journal Title

      Applied Acoustics

      Volume: Vol.73, Issue 12 Pages: 1282-1288

    • DOI

      10.1016/j.apacoust.2012.03.009

    • Peer Reviewed
  • [Presentation] Hyak-Ki Men - The Anti-Ogra Ninja Mask2013

    • Author(s)
      Toshikazu Ohshima, Kohei Isshiki, Ko Hayami, Yuki Shibata, and Chiharu Tanaka
    • Organizer
      15th Int. Conf. on Virtual Reality and Converging Technologies (Laval Virtual 2013)
    • Place of Presentation
      Salle Polyvalente, place de Hercé, Laval, France
    • Year and Date
      20130320-24
  • [Presentation] 全天周型X-Media GalaxyにおけるCGの奥行き知覚の実験と考察2013

    • Author(s)
      上原祐馬, 木村朝子, 柴田史久, 田村秀行
    • Organizer
      2013年電子情報通信学会総合大会
    • Place of Presentation
      岐阜大学(岐阜)
    • Year and Date
      2013-03-22
  • [Presentation] 隠消現実感における隠背景面復元の光学的整合性の実現(2)~エッジを考慮した画像修復に基づく隠背景投影画像の補正~2013

    • Author(s)
      柳田晃平, 森尚平, 柴田史久, 太村朝子, 田村秀行
    • Organizer
      2013年電子情報通信学会総合大会
    • Place of Presentation
      岐阜大学(岐阜)
    • Year and Date
      2013-03-22
  • [Presentation] ランドマークDBを用いたMRトラッキング法の性能向上(3)~レンジファインダを利用したランドマークDB構築の効率化~2013

    • Author(s)
      酒井章伸, 森尚平, 柴田史久, 木村朝子, 田村秀行
    • Organizer
      2013年電子情報通信学会総合大会
    • Place of Presentation
      岐阜大学(岐阜)
    • Year and Date
      2013-03-22
  • [Presentation] パラメトリックスピーカの再生音場における主観的音質と復調度の評価2013

    • Author(s)
      生藤大典, 中山雅人, 西浦敬信
    • Organizer
      日本音響学会2013年春季研究発表会
    • Place of Presentation
      東京工科大学(東京)
    • Year and Date
      2013-03-13
  • [Presentation] 全天周ドームにおける音像プラネタリウム方式の高臨場化-サブウーファ・間接スピーカ併用による音質補償と残響制御の検討-2013

    • Author(s)
      辻井秀弥, 中山雅人, 西浦敬信
    • Organizer
      日本音響学会2013年春季研究発表会
    • Place of Presentation
      東京工科大学(東京)
    • Year and Date
      2013-03-13
  • [Presentation] パラメトリックスピーカアレイを用いた壁面反射型音像再生の主観評価2013

    • Author(s)
      益永翔平, 生藤大典, 中山雅人, 西浦敬信
    • Organizer
      日本音響学会2013年春季研究発表会
    • Place of Presentation
      東京工科大学(東京)
    • Year and Date
      2013-03-13
  • [Presentation] Auditory distance perception with combination of parametric and dynamic loudspeakers2013

    • Author(s)
      Daisuke Ikefuji, Sota Kurimoto, Masato Nakayama, and Takanobu Nishiura
    • Organizer
      2013 RISP Int. Workshop on Nonlinear Circuits, Communications and Signal Processing
    • Place of Presentation
      Courtyard King Kamehameha's Kona Beach Hotel, The Island of Hawaii, USA
    • Year and Date
      2013-03-07
  • [Presentation] Non-rigid surface tracking for virtual fitting system2013

    • Author(s)
      Naoki Shimizu, Takumi Yoshida, Tomoki Hayashi, Francois de Sorbier, and Hideo Saito
    • Organizer
      8th Int. Conf. on Computer Vision Theory and Applications
    • Place of Presentation
      Barcelo Sants Hotel, Barcelona, Spain
    • Year and Date
      2013-02-22
  • [Presentation] RGB-Dカメラと鏡面球を用いた可視性関数の推定と人物のRe-lightingへの応用2013

    • Author(s)
      池田拓也, フランソワ・ドゥ・ソルビエ, 杉本麻樹, 斎藤英雄
    • Organizer
      情報処理学会コンピュータビジョンとイメージメディア研究会
    • Place of Presentation
      京都大学(京都)
    • Year and Date
      2013-01-24
  • [Presentation] 複数の超音波スピーカを用いた音像位置の補間と視覚補助に基づく移動音像の実現2013

    • Author(s)
      伊藤仁一, 中山雅人, 西浦敬信, 木村朝子, 柴田史久, 田村秀行
    • Organizer
      電子情報通信学会パターン認識・メディア理解研究会
    • Place of Presentation
      京都大学(京都)
    • Year and Date
      2013-01-23
  • [Presentation] S3D化に伴うMR-PreVizシステムの機能拡張と性能向上(2)-ICPアルゴリズムを利用したステレオカメラ・トラッキング法-2013

    • Author(s)
      森尚平, 柴田史久, 木村朝子, 田村秀行
    • Organizer
      電子情報通信学会パターン認識・メディア理解研究会
    • Place of Presentation
      京都大学(京都)
    • Year and Date
      2013-01-23
  • [Presentation] Calibration-free projector-camera system for spatial augmented reality on planar surfaces2012

    • Author(s)
      Takayuki Nakamura, Francois de Sorbier, Sandy Martedi, and Hideo Saito
    • Organizer
      21st Int. Conf. on Patten Recognition
    • Place of Presentation
      Tsukuba Int. Congress Center Tsukuba, Japan
    • Year and Date
      2012-11-12
  • [Presentation] Illumination estimation from shadow and incomplete object shape using an RGB-D Camera2012

    • Author(s)
      Takuya Ikeda, Yuji Oyamada, Maki Sugimoto, and Hideo Saito
    • Organizer
      21st Int. Conf. on Patten Recognition
    • Place of Presentation
      Tsukuba Int. Congress Center Tsukuba, Japan
    • Year and Date
      2012-11-12
  • [Presentation] Real-time line-based SLAM for AR2012

    • Author(s)
      Keisuke Hirose, Hideo Saito
    • Organizer
      3rd Int'l Workshop on Benchmark Test Schemes for AR/MR Geometric Registration and Tracking Method
    • Place of Presentation
      Tsukuba Int. Congress Center Tsukuba, Japan
    • Year and Date
      2012-11-11
  • [Presentation] Pose estimation evaluation of viewpoint generative learning2012

    • Author(s)
      Takumi Yoshida, Hideo Saito
    • Organizer
      3rd Int'l Workshop on Benchmark Test Schemes for AR/MR Geometric Registration and Tracking Method
    • Place of Presentation
      Tsukuba Int. Congress Center Tsukuba, Japan
    • Year and Date
      2012-11-11
  • [Presentation] 残響制御のためのパラメトリック・動電形間接スピーカ併用手法における室内音響指標を用いた客観的評価2012

    • Author(s)
      辻井秀弥, 中山雅人, 西浦敬信
    • Organizer
      日本音響学会2012年秋季研究発表会
    • Place of Presentation
      信州大学(長野)
    • Year and Date
      2012-09-20
  • [Presentation] キャリア波と側波帯の分離放射によるオーディオスポット形成の基礎的検討2012

    • Author(s)
      松井唯, 生藤大典, 中山雅人, 西浦敬信
    • Organizer
      日本音響学会2012年秋季研究発表会
    • Place of Presentation
      信州大学(長野)
    • Year and Date
      2012-09-20
  • [Presentation] Log-TSPを用いたパラメトリックスピーカの3次高調波歪測定2012

    • Author(s)
      益永翔平, 生藤大典, 中山雅人, 西浦敬信
    • Organizer
      日本音響学会2012年秋季研究発表会
    • Place of Presentation
      信州大学(長野)
    • Year and Date
      2012-09-19
  • [Presentation] パラメトリックスピーカにおける復調評価指標DUA-CCnの主観評価に関する一検討2012

    • Author(s)
      生藤大典, 中山雅人, 西浦敬信
    • Organizer
      日本音響学会2012年秋季研究発表会
    • Place of Presentation
      信州大学(長野)
    • Year and Date
      2012-09-19
  • [Presentation] 2台の同型カメラを併用したHDR動画像の生成法2012

    • Author(s)
      小田仁己, 吉田麻子, 柴田史久, 木村朝子, 田村秀行
    • Organizer
      第17回日本バーチャルリアリティ学会大会
    • Place of Presentation
      慶應義塾大学(神奈川)
    • Year and Date
      2012-09-12
  • [Presentation] 隠消現実感における隠背景投影誤差の軽減-モザイキング法を用いた幾何学的不整合への対処-2012

    • Author(s)
      小向啓文, 森尚平, 柴田史久, 木村朝子, 田村秀行
    • Organizer
      第17回日本バーチャルリアリティ学会大会
    • Place of Presentation
      慶應義塾大学(神奈川)
    • Year and Date
      2012-09-12
  • [Presentation] Colour descriptors for tracking in spatial augmented reality2012

    • Author(s)
      Thijs Kooi, Francois de Sorbier, and Hideo Saito
    • Organizer
      ACCV Workshop on Detection and Tracking in Challenging Environments
    • Place of Presentation
      Daejeon Convention Center, Daejeon, Korea
    • Year and Date
      2012-09-06
  • [Presentation] Fast line description for line-based SLAM2012

    • Author(s)
      Keisuke Hirose and Hideo Saito
    • Organizer
      British Machine Vision Conference 2012
    • Place of Presentation
      University of Surrey, Guildford, UK
    • Year and Date
      2012-09-04
  • [Presentation] Terror in Fog~距離情報を利用した複合現実型霧表現~2012

    • Author(s)
      田村和弥, 酒井章伸, 柴田史久, 木村朝子, 田村秀行
    • Organizer
      映像情報メディア学会2012年次大会
    • Place of Presentation
      広島市立大学(広島)
    • Year and Date
      2012-08-31
  • [Presentation] スペクトル包絡の相互相関を用いたパラメトリックスピーカの復調度測定2012

    • Author(s)
      生藤大典, 中山雅人, 西浦敬信
    • Organizer
      第25回 回路とシステムワークショップ
    • Place of Presentation
      ウェスティンホテル淡路(兵庫)
    • Year and Date
      2012-07-31
  • [Presentation] 動電型間接スピーカを用いた残響時間制御に基づく三次元音場再生システム2012

    • Author(s)
      辻井秀弥, 中山雅人, 西浦敬信
    • Organizer
      第25回 回路とシステムワークショップ
    • Place of Presentation
      ウェスティンホテル淡路(兵庫)
    • Year and Date
      2012-07-31
  • [Presentation] Log-TSPを用いたパラメトリックスピーカの2次高調波歪測定2012

    • Author(s)
      益永翔平, 生藤大典, 森勢将雅, 中山雅人, 西浦敬信
    • Organizer
      第25回 回路とシステムワークショップ
    • Place of Presentation
      ウェスティンホテル淡路(兵庫)
    • Year and Date
      2012-07-31
  • [Presentation] Harmonic distortion measurement for a parametric loudspeaker with logarithmic time stretched pulse2012

    • Author(s)
      Shohei Masunaga, Daisuke Ikefuji, Masato Nakayama, Masanori Morise, and Takanobu Nishiura
    • Organizer
      Acoustics 2012 Hong Kong
    • Place of Presentation
      Hong Kong Convention & Exhibition Centre, Hong Kong, China
    • Year and Date
      2012-05-17
  • [Presentation] Estimation of Demodulation Ratio for the Parametric Loudspeaker Based on Spectral Envelope2012

    • Author(s)
      Daisuke Ikefuji, Masato Nakayama, Masanori Morise, and Takanobu Nishiura
    • Organizer
      Acoustics 2012 Hong Kong
    • Place of Presentation
      Hong Kong Convention & Exhibition Centre, Hong Kong, China
    • Year and Date
      2012-05-17

URL: 

Published: 2015-07-13  

Information User Guide FAQ News Terms of Use Attribution of KAKENHI

Powered by NII kakenhi