2020 Fiscal Year Annual Research Report
Communication System for Defending against Attacks of Media Clones
| Project/Area Number |
16H06302
|
|---|
| Research Institution | Osaka University |
|---|
Principal Investigator |
馬場口 登 大阪大学, 工学研究科, 教授 (30156541)
|
|---|
| Co-Investigator(Kenkyū-buntansha) |
越前 功 国立情報学研究所, 情報社会相関研究系, 教授 (30462188)
|
|---|
| Project Period (FY) |
2016-05-31 – 2021-03-31
|
| Keywords | 視聴覚メディア処理 / プライバシー保護 / フェイクメディア / メディアクローン |
|---|
| Outline of Annual Research Achievements |
本年度は、研究期間の最終年度であるため、個々の課題の追求と共に、研究成果の総括、体系化を行った。
（A)物理空間とサイバー空間の両方でプライバシー情報、生体情報・環境情報などのフェイク情報化防止法を考察し、これまでの研究成果、すなわち顔や人物像など外観の匿名化、行動履歴など内心の保護、指紋や静脈パターンの保護に関する諸手法の得失などを考察し、招待論文として出版した。
（B）音声・顔画像・身体像・文書・ソーシャルメディアのクローン生成方法の具体化と、真正メディアへの類似限界について検討し、メディアごとの特性に応じて洗練化した。特にニューラルコンピューティング（深層学習やGAN）の利用により、各メディアのクローン生成法の向上を図った。
（C）メディアクローン認識による情報の受け手の保護方式を検討した。音声、顔画像、身体像、文書（文字）、ソーシャルメディアなどの真正メディアとクローンとの識別法を検討した。特に、世界に先んじて開発した顔映像クローンの検出法では、マルチタスク学習と半教師付き学習を導入して顔映像クローンの画像フレームにおいて、どの領域が改ざん、加工されたかを検出する方法を具体化した。本課題の研究途上で新たに浮かび上がった課題である認識器クローンに関する考察も深化させた。テーマ（B）（C）に関する成果も招待論文で発表した。
（D）文書によるメディアクローン攻撃について検討し、ビジネスメール詐欺を対象とした研究を行った。受け手から送り手への問合せを含む欺瞞的コミュニケーションプロセスのモデル化を数理論理の枠組で試みた。
（E）音声クローンの生成と認識（検出）に関する対戦型循環的実証実験（国際的チャレンジASVspoof2019、VCC2020）を開催し、その結果を関連国際会議で報告した。チャレンジに利用されたデータベースはオープンデータとして無償公開した。
|
| Research Progress Status |
令和2年度が最終年度であるため、記入しない。
|
| Strategy for Future Research Activity |
令和2年度が最終年度であるため、記入しない。
|
| Remarks |
本研究課題「メディアクローン攻撃を防御するコミュニケーション系」の公式Webサイト：http://www2c.comm.eng.osaka-u.ac.jp/proj/mc/index.html (2021年4月26日現在2493アクセス)
2020年4月～2021年3月の間に、本研究課題に関する20件の取材協力と、2件の受賞がある。
|
-
-
-
-
[Journal Article] Generation and detection of media clones2021
Author(s)
Isao Echizen, Noboru Babaguchi, Junichi Yamagichi, Naoko Nitta, Yuta Nakashima, Kazuaki Nakamura, Kazuhiro Kono, Fuming Fang, Seiko Myojin, Zhenzhong Kuang, Huy H. Nguyen, and Ngoc-Dung T. Tieu
-
Journal Title
IEICE Transactions on Information and Systems
Volume: E104.D
Pages: 12-23
DOI
Peer Reviewed / Open Access
-
[Journal Article] Preventing fake information generation against media clone attacks2021
Author(s)
Noboru Babaguchi, Isao Echizen, Junichi Yamagichi, Naoko Nitta, Yuta Nakashima, Kazuaki Nakamura, Kazuhiro Kono, Fuming Fang, Seiko Myojin, Zhenzhong Kuang, Huy H. Nguyen, and Ngoc-Dung T. Tieu
-
Journal Title
IEICE Transactions on Information and Systems
Volume: E104.D
Pages: 2-11
DOI
Peer Reviewed / Open Access
-
[Journal Article] ASVspoof 2019: a large-scale public database of synthesized, converted and replayed speech2020
Author(s)
Xin Wang, Junichi Yamagishi, Massimiliano Todisco, Hector Delgado, Andreas Nautsch, Nicholas Evans, Md Sahidullah, Ville Vestman, Tomi Kinnunen, Kong Aik Lee, Lauri Juvela, Paavo Alku, Yu-Huai Peng, Hsin-Te Hwang, Yu Tsao, Hsin-Min Wang, Sebastien Le Maguer, Markus Becker, Fergus Henderson他計40名
-
Journal Title
Computer Speech & Language
Volume: 64
Pages: 27pages
DOI
Peer Reviewed / Open Access / Int'l Joint Research
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
-
