• 研究課題をさがす
  • 研究者をさがす
  • KAKENの使い方
  1. 前のページに戻る

不特定人称視点映像を用いたコミュニケーション型教示映像メディア

研究課題

研究課題/領域番号 17H01772
研究種目

基盤研究(B)

配分区分補助金
応募区分一般
研究分野 ヒューマンインタフェース・インタラクション
研究機関筑波大学

研究代表者

北原 格  筑波大学, 計算科学研究センター, 教授 (70323277)

研究分担者 亀田 能成  筑波大学, 計算科学研究センター, 教授 (70283637)
研究期間 (年度) 2017-04-01 – 2021-03-31
研究課題ステータス 完了 (2020年度)
配分額 *注記
17,550千円 (直接経費: 13,500千円、間接経費: 4,050千円)
2020年度: 3,640千円 (直接経費: 2,800千円、間接経費: 840千円)
2019年度: 3,250千円 (直接経費: 2,500千円、間接経費: 750千円)
2018年度: 4,160千円 (直接経費: 3,200千円、間接経費: 960千円)
2017年度: 6,500千円 (直接経費: 5,000千円、間接経費: 1,500千円)
キーワード臨場感コミュニケーション / 多視点映像 / 自由視点映像 / 教示メディア / インタラクティブメディア / 教示映像 / 映像コミュニケーション / 不特定人称視点 / 多人称視点映像 / 不特定人称視点映像 / インタフェース
研究成果の概要

自由な視点移動と高品質映像生成という特長を有する多視点映像スライディング方式を用いて、自分(一人称)、相手(二人称)、俯瞰(三人称)といった複数の人称を自由に切り替えながら3次元的観察が可能な不特定人称視点映像の生成・提示手法を実現した。スポーツトレーニング、セラピスト育成、医療施術などの教示現場に、各分野の研究者との連携の下、不特定人称視点映像を導入し、作業内容の把握に適した観察位置や観察人称について検証することで、複数人物によるコミュニケーションに基づいたインタラクティブな指導・教示(コミュニケーション型教示)に適した映像メディアの実現に関する研究に取り組んだ。

研究成果の学術的意義や社会的意義

基盤技術開発から実証実験の実施を通じて、多視点スライディング方式を用いた自由視点映像生成提示手法を、インタラクティブな指導・教示に資するレベルまで引き上げた。具体的には、撮影からコンテンツ生成までの作業軽減を含め、教示現場に導入可能な多視点映像撮影システムの実現に取り組んだ。また、直感的な視点操作とコンテキスト理解を可能とするタブレット型閲覧インタフェースを開発した。スポーツトレーニング、セラピスト育成、医療施術における実証実験を通じて、不特定人称映像の観察視点や人称を調査し、コミュニケーション型教示における要求と考案映像メディア方式の実用性を検証した。

報告書

(5件)
  • 2020 実績報告書   研究成果報告書 ( PDF )
  • 2019 実績報告書
  • 2018 実績報告書
  • 2017 実績報告書
  • 研究成果

    (53件)

すべて 2021 2020 2019 2018 2017 その他

すべて 国際共同研究 (6件) 雑誌論文 (20件) (うち国際共著 7件、 査読あり 20件、 オープンアクセス 12件) 学会発表 (20件) (うち国際学会 9件、 招待講演 3件) 備考 (3件) 産業財産権 (4件)

  • [国際共同研究] Curtin University(オーストラリア)

    • 関連する報告書
      2020 実績報告書
  • [国際共同研究] University of Surrey(英国)

    • 関連する報告書
      2020 実績報告書
  • [国際共同研究] University of Surrey(英国)

    • 関連する報告書
      2019 実績報告書
  • [国際共同研究] Curtin University(オーストラリア)

    • 関連する報告書
      2019 実績報告書
  • [国際共同研究] University of Surrey(英国)

    • 関連する報告書
      2017 実績報告書
  • [国際共同研究] Curtin University(Australia)

    • 関連する報告書
      2017 実績報告書
  • [雑誌論文] マーカレス3次元骨格位置推定のためのカメラキャリブレーション手法とバドミントン競技映像処理への実践2020

    • 著者名/発表者名
      宍戸 英彦、北原 格
    • 雑誌名

      情報処理学会論文誌デジタルプラクティス(TDP)

      巻: Vol.1, No.1 ページ: 8-19

    • NAID

      170000183490

    • 関連する報告書
      2020 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Geometric Calibration of Projector Using a Mobile Camera for Spatial Augmented Reality2020

    • 著者名/発表者名
      Chun Xie, Hidehiko Shishido, Yoshinari Kameda, Itaru Kitahara
    • 雑誌名

      Transactions of the Virtual Reality Society of Japan

      巻: Vol.25, No.2 ページ: 138-147

    • NAID

      130007866524

    • 関連する報告書
      2020 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Accurate Overlapping Method of Ultra-Long Interval Time-Lapse Images for World Heritage Site Investigation2020

    • 著者名/発表者名
      Shishido Hidehiko、Kawasaki Emi、Kawamura Youhei、Matsui Toshiya、Kitahara Itaru
    • 雑誌名

      Journal on Computing and Cultural Heritage

      巻: 13 ページ: 1-18

    • 関連する報告書
      2020 実績報告書
    • 査読あり
  • [雑誌論文] Method of Multiview Video Switching for Soccer Game Analysis in Large Scale Space2020

    • 著者名/発表者名
      Shishido Hidehiko、Okada Yosuke、Kameda Yoshinari、Koido Masaaki、Kitahara Itaru
    • 雑誌名

      ITE Transactions on Media Technology and Applications

      巻: 8 ページ: 70-80

    • 関連する報告書
      2020 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Image-quality Improvement of Omnidirectional Free-viewpoint Images by Generative Adversarial Networks2020

    • 著者名/発表者名
      Takeuchi Oto, Shishido Hidehiko, Kameda Yoshinari, Kim Hansung, Kitahara Itaru
    • 雑誌名

      Proceedings of International Joint Conference on Computer Vision, Imaging and Computer Graphics Theory and Applications (VISAPP2020)

      巻: - ページ: 299-306

    • DOI

      10.5220/0008959802990306

    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Read-the-game: System for skill-based visual exploratory activity assessment with a full body virtual reality soccer simulation2020

    • 著者名/発表者名
      Rojas Ferrer Cesar Daniel, Shishido Hidehiko, Kitahara Itaru, Kameda Yoshinari
    • 雑誌名

      PLOS ONE

      巻: 15-3 号: 3 ページ: 1-29

    • DOI

      10.1371/journal.pone.0230042

    • NAID

      120007161351

    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] [Papers] Method of Multiview Video Switching for Soccer Game Analysis in Large Scale Space2020

    • 著者名/発表者名
      Shishido Hidehiko、Okada Yosuke、Kameda Yoshinari、Koido Masaaki、Kitahara Itaru
    • 雑誌名

      ITE Transactions on Media Technology and Applications

      巻: 8 号: 2 ページ: 70-80

    • DOI

      10.3169/mta.8.70

    • NAID

      130007825881

    • ISSN
      2186-7364
    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] Development of 3D rock fragmentation measurement system using photogrammetry2019

    • 著者名/発表者名
      Hyongdoo Jang, Itaru Kitahara, Youhei Kawamura, Yasunori Endo, Erkan Topal, Ryo Degawa & Samson Mazara
    • 雑誌名

      International Journal of Mining, Reclamation and Environment

      巻: なし 号: 4 ページ: 294-305

    • DOI

      10.1080/17480930.2019.1585597

    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス / 国際共著
  • [雑誌論文] Calibration of multiple sparsely distributed cameras using a mobile camera2019

    • 著者名/発表者名
      Shishido Hidehiko, Kitahara Itaru
    • 雑誌名

      Proceedings of the Institution of Mechanical Engineers, Part P: Journal of Sports Engineering and Technology

      巻: 234 号: 1 ページ: 37-48

    • DOI

      10.1177/1754337119874276

    • NAID

      120007132789

    • 関連する報告書
      2019 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] 視覚教示による学習支援のための大規模床面投影システム2019

    • 著者名/発表者名
      謝 淳, 高橋 一誠, 大木 美加, ブロー バティスト, 北原 格, 鈴木 健嗣
    • 雑誌名

      電子情報通信学会和文論文誌A

      巻: Vol.J102-A, No.2 ページ: 68-79

    • 関連する報告書
      2018 実績報告書
    • 査読あり
  • [雑誌論文] An Empathic Design Approach to an Augmented Gymnasium in a Special Needs School Setting2018

    • 著者名/発表者名
      Issey Takahashi, Mika Oki, Baptiste Bourreau, Itaru Kitahara, and Kenji Suzuki
    • 雑誌名

      International Journal of Design

      巻: Vol.12, No.3 ページ: 111-125

    • 関連する報告書
      2018 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] 多視点映像コンテンツによるオンサイト視覚フィードバック方式2018

    • 著者名/発表者名
      永井隆昌, 宍戸英彦, 亀田能成,北原格
    • 雑誌名

      映像情報メディア学会誌

      巻: 72 号: 9 ページ: J119-J124

    • DOI

      10.3169/itej.72.J119

    • NAID

      130007458333

    • ISSN
      1342-6907, 1881-6908
    • 関連する報告書
      2018 実績報告書
    • 査読あり
  • [雑誌論文] A Calibration Method of Floor Projection System for Learning Aids at School Gym2018

    • 著者名/発表者名
      Chun Xie, Hidehiko Shishido, Mika Oki, Yoshinari Kameda, Kenji Suzuki and Itaru Kitahara
    • 雑誌名

      Third IEEE International Conference on Image Processing, Applications and Systems (IPAS 2018)

      巻: -

    • 関連する報告書
      2018 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] An On-site Visual Feedback Method Using Bullet-Time Video2018

    • 著者名/発表者名
      Takasuke Nagai, Hidehiko Shishido, Yoshinari Kameda, Itaru Kitahara
    • 雑誌名

      ACM MM2018 First International Workshop on Multimedia Content Analysis in Sports

      巻: - ページ: 39-44

    • 関連する報告書
      2018 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] Xth Person View Video for Observation from Diverse Perspectives2018

    • 著者名/発表者名
      Naoki Shimura, Hidehiko Shishido, Yoshinari Kameda, Kenji Suzuki, Itaru Kitahara
    • 雑誌名

      2018 Joint 7th International Conference on Informatics, Electronics & Vision (ICIEV) and 2018 2nd International Conference on Imaging, Vision & Pattern Recognition (icIVPR)

      巻: -

    • NAID

      120007134097

    • 関連する報告書
      2018 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] Generation Method for Immersive Bullet-Time Video Using an Omnidirectional Camera in VR Platform2018

    • 著者名/発表者名
      Oto Takeuchi, Hidehiko Shishido, Yoshinari Kameda, Hansung Kim, Itaru Kitahara
    • 雑誌名

      ACM MM2018 Workshop on Audio-Visual Scene Understanding for Immersive Multimedia

      巻: - ページ: 19-26

    • 関連する報告書
      2018 実績報告書
    • 査読あり / 国際共著
  • [雑誌論文] [Paper] Improvement of Badminton-Player Tracking Applying Image Pixel Compensation2017

    • 著者名/発表者名
      Takashi Kamiyama, Yoshinari Kameda, Yuichi Ohta, Itaru Kitahara
    • 雑誌名

      ITE Transactions on Media Technology and Applications

      巻: 5 号: 2 ページ: 36-41

    • DOI

      10.3169/mta.5.36

    • NAID

      130005530487

    • ISSN
      2186-7364
    • 関連する報告書
      2017 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] [Paper] Visual Tracking Method of a Quick and Anomalously Moving Badminton Shuttlecock2017

    • 著者名/発表者名
      Hidehiko Shishido, Yoshinari Kameda, Yuichi Ohta, Itaru Kitahara
    • 雑誌名

      ITE Transactions on Media Technology and Applications

      巻: 5 号: 3 ページ: 110-120

    • DOI

      10.3169/mta.5.110

    • NAID

      130006907809

    • ISSN
      2186-7364
    • 関連する報告書
      2017 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] 自動走行車両搭乗者のストレス軽減を目的とした死角領域と車両制御情報の可視化2017

    • 著者名/発表者名
      笹井翔太, 亀田能成, 大田友一, 神原誠之, 萩田紀博, 北原格
    • 雑誌名

      日本バーチャルリアリティ学会論文誌

      巻: 22 号: 2 ページ: 189-198

    • DOI

      10.18974/tvrsj.22.2_189

    • NAID

      130005701305

    • ISSN
      1344-011X, 2423-9593
    • 関連する報告書
      2017 実績報告書
    • 査読あり / オープンアクセス
  • [雑誌論文] FUTUREGYM: A gymnasium with interactive floor projection for children with special needs2017

    • 著者名/発表者名
      Issey Takahashi, Mika Oki, Baptiste Bourreau, Itaru Kitahara, Kenji Suzuki
    • 雑誌名

      International Journal of Child-Computer Interaction

      巻: Vol.15 ページ: 37-47

    • DOI

      10.1016/j.ijcci.2017.12.002

    • 関連する報告書
      2017 実績報告書
    • 査読あり / オープンアクセス
  • [学会発表] A Dense 3D Organ Modeling from a Laparoscopic Video2021

    • 著者名/発表者名
      Ryosuke Maekawa, Hidehiko Shishido, Yoshinari Kameda, Itaru Kitahara
    • 学会等名
      International Forums on Medical Imaging in Asia (IFMIA2021)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] Interactive e-Book Linking Text and Multi-View Video2020

    • 著者名/発表者名
      Xinyi Qiu, Hidehiko Shishido, Ryuuki Sakamoto, Itaru Kitahara
    • 学会等名
      IEEE 9th Global Conference on Consumer Electronics (GCCE2020)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] VR Interface for Designing Multi-view-Camera Layout in a Large-Scale Space2020

    • 著者名/発表者名
      Naoto Matsubara, Hidehiko Shishido, Itaru Kitahara
    • 学会等名
      The 7th International Conference on Augmented Reality, Virtual Reality and Computer Graphics (SALENTO AVR2020)
    • 関連する報告書
      2020 実績報告書
    • 国際学会
  • [学会発表] 複数の曲面鏡像からの自由視点映像生成法2020

    • 著者名/発表者名
      蛭田 雄也,宍戸 英彦,北原 格
    • 学会等名
      日本バーチャルリアリティ学会複合現実感研究会,
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 深層学習による3次元運動予測を用いた遠隔操作映像の時間補償2020

    • 著者名/発表者名
      上田 樹,宍戸 英彦,北原 格
    • 学会等名
      情報処理学会コンピュータビジョンとイメージメディア研究会(CVIM)
    • 関連する報告書
      2020 実績報告書
  • [学会発表] 投手正面から撮影した映像中での投球動作初期の分析2020

    • 著者名/発表者名
      野原 直翔,宍戸 英彦,北原 格,亀田 能成
    • 学会等名
      電子情報通信学会 技術研究報告MVE
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 3次元画像処理と敵対的生成ネットワークを用いた全方位多視点画像閲覧法2020

    • 著者名/発表者名
      竹内 音,宍戸 英彦,亀田 能成,Kim Hansung,北原 格
    • 学会等名
      日本バーチャルリアリティ学会複合現実感研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 多視点映像を用いたインタラクティブ電子書籍による立体芸術鑑賞方式2019

    • 著者名/発表者名
      Qiu XinYi,宍戸 英彦,亀田 能成,坂本 竜基,北原 格
    • 学会等名
      日本バーチャルリアリティ学会複合現実感研究会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 多視点カメラ配置検討のためのVRインタフェース2019

    • 著者名/発表者名
      松原 尚利,宍戸 英彦,亀田 能成,北原 格
    • 学会等名
      第24回日本バーチャルリアリティ学会大会
    • 関連する報告書
      2019 実績報告書
  • [学会発表] 鏡面反射領域を用いた一人称視点映像生成法2019

    • 著者名/発表者名
      蛭田 雄也,宍戸 英彦,亀田 能成,北原 格
    • 学会等名
      情報処理学会 第18回情報科学技術フォーラム(FIT2019)
    • 関連する報告書
      2019 実績報告書
  • [学会発表] Free-Viewpoint Video Generation in Sports Stadium2018

    • 著者名/発表者名
      Itaru Kitahara
    • 学会等名
      The 10th Three Dimensional Systems and Applications (3DSA2018)
    • 関連する報告書
      2018 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] Augmented Reality Display for Visually Supporting Human on a Vehicle2018

    • 著者名/発表者名
      Itaru Kitahara
    • 学会等名
      International Workshop on Comfort Intelligence with AR for Autonomous Vehicle
    • 関連する報告書
      2018 実績報告書
    • 国際学会 / 招待講演
  • [学会発表] 注目領域の見え方変化を軽減するバレットタイム映像スタビライジング法2018

    • 著者名/発表者名
      鳥屋 剛毅, 北原 格
    • 学会等名
      第21回画像の認識・理解シンポジウム(MIRU2018)
    • 関連する報告書
      2018 実績報告書
  • [学会発表] Automatic camera-work generation of bullet-time video for soccer scene2018

    • 著者名/発表者名
      Yosuke Okada, Hidehiko Shishido, Yoshinari Kameda, Masaaki Koido, Itaru Kitahara
    • 学会等名
      The 15th ACM SIGGRAPH European Conference on Visual Media Production (CVMP2018)
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] Bullet-Time Book: Augmentation of Visual Information in Figures by Bullet-Time Video Display2018

    • 著者名/発表者名
      Qiu Xin Yi, Hidehiko Shishido, Yoshinari Kameda, Itaru Kitahara
    • 学会等名
      The 2nd Asia-Pacific Workshop on Mixed and Augmented Reality (APMAR)
    • 関連する報告書
      2018 実績報告書
    • 国際学会
  • [学会発表] 発達教育支援に着目した多視点映像閲覧インタフェースの開発2018

    • 著者名/発表者名
      北村誠之, 宍戸英彦, 榎本拓哉, 亀田能成, 山本淳一, 北原格
    • 学会等名
      情報処理学会CVIM研究会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] 全方位バレットタイム映像の生成提示システム2018

    • 著者名/発表者名
      竹内 音, 宍戸 英彦, 亀田 能成, キム ハンソン, 北原 格
    • 学会等名
      情報処理学会CVIM研究会
    • 関連する報告書
      2017 実績報告書
  • [学会発表] SMOOTHLY SWITCHING METHOD OF ASYNCHRONOUS MULTI-VIEW VIDEOS USING FRAME INTERPOLATION2017

    • 著者名/発表者名
      Hidehiko Shishido, Aoi Harazaki, Yoshinari Kameda, Itaru Kitahara
    • 学会等名
      The 3DTV Conference 2017
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] Pseudo-Dolly-In Video Generation Combining 3D Modeling and Image Reconstruction2017

    • 著者名/発表者名
      Hidehiko Shishido, Kazuki Yamanaka, Yoshinari Kameda, Itaru Kitahara
    • 学会等名
      2017 IEEE International Symposium on Mixed and Augmented Reality Workshop on Highly Diverse Cameras and Displays for Mixed and Augmented Reality
    • 関連する報告書
      2017 実績報告書
    • 国際学会
  • [学会発表] 多視点映像メディア技術に基づいた研究開発事例の紹介2017

    • 著者名/発表者名
      北原格
    • 学会等名
      URCF超臨場感映像WG:医工連携の最前線とその周辺技術
    • 関連する報告書
      2017 実績報告書
    • 招待講演
  • [備考] 筑波大学「大学『知』活用プログラム」Remote Museum Explorer

    • URL

      https://www.osi.tsukuba.ac.jp/fight_covid19/kitahara/

    • 関連する報告書
      2020 実績報告書
  • [備考] 自由に視点を変えて展示物を楽しめる技術の開発

    • URL

      https://www.osi.tsukuba.ac.jp/fight_covid19_interview/kitahara/

    • 関連する報告書
      2020 実績報告書
  • [備考] 筑波大学研究者総覧

    • URL

      https://trios.tsukuba.ac.jp/researcher/0000001021

    • 関連する報告書
      2020 実績報告書
  • [産業財産権] 多視点映像撮影装置2020

    • 発明者名
      北原格、小田竜也
    • 権利者名
      北原格、小田竜也
    • 産業財産権種類
      特許
    • 産業財産権番号
      2020-055921
    • 出願年月日
      2020
    • 関連する報告書
      2019 実績報告書
  • [産業財産権] 映像処理システム及び映像処理装置2018

    • 発明者名
      北原格
    • 権利者名
      北原格
    • 産業財産権種類
      特許
    • 産業財産権番号
      2018-219927
    • 出願年月日
      2018
    • 関連する報告書
      2018 実績報告書
  • [産業財産権] 撮像システム、撮像方式2017

    • 発明者名
      北原格、宍戸英彦
    • 権利者名
      国立大学法人筑波大学
    • 産業財産権種類
      特許
    • 産業財産権番号
      2017-152604
    • 出願年月日
      2017
    • 関連する報告書
      2017 実績報告書
  • [産業財産権] 画像処理装置、画像表示装置及び画像処理プログラム2017

    • 発明者名
      北原格、宍戸英彦
    • 権利者名
      国立大学法人筑波大学
    • 産業財産権種類
      特許
    • 産業財産権番号
      2017-183910
    • 出願年月日
      2017
    • 関連する報告書
      2017 実績報告書

URL: 

公開日: 2017-04-28   更新日: 2022-12-28  

サービス概要 検索マニュアル よくある質問 お知らせ 利用規程 科研費による研究の帰属

Powered by NII kakenhi