やわらかいダイナミクスとフレキシブルセンサー技術の融合による情報処理限界の突破

• Project Area: Science of Soft Robot: interdisciplinary integration of mechatronics, material science, and bio-computing
• Project/Area Number: 18H05472
• Research Category: Grant-in-Aid for Scientific Research on Innovative Areas (Research in a proposed research area)
• Allocation Type: Single-year Grants
• Review Section: Complex systems
• Research Institution: The University of Tokyo
• Principal Investigator: 中嶋 浩平 東京大学, 大学院情報理工学系研究科, 准教授 (10740251)
• Co-Investigator(Kenkyū-buntansha): 竹井 邦晴 大阪府立大学, 工学(系)研究科(研究院), 教授 (20630833)
• Project Period (FY): 2018-06-29 – 2023-03-31
• Project Status: Granted (Fiscal Year 2021)
• Budget Amount: ¥96,590,000 (Direct Cost: ¥74,300,000、Indirect Cost: ¥22,290,000); Fiscal Year 2021: ¥18,980,000 (Direct Cost: ¥14,600,000、Indirect Cost: ¥4,380,000); Fiscal Year 2020: ¥18,980,000 (Direct Cost: ¥14,600,000、Indirect Cost: ¥4,380,000); Fiscal Year 2019: ¥19,240,000 (Direct Cost: ¥14,800,000、Indirect Cost: ¥4,440,000); Fiscal Year 2018: ¥20,410,000 (Direct Cost: ¥15,700,000、Indirect Cost: ¥4,710,000)
• Keywords: ソフトロボット / リザバー計算 / 物理リザバー計算 / 非線形力学系 / フレキシブルセンサ / test / ソフトロボティクス / リザバーコンピューティング / リカレントニューラルネットワーク / フレキシブルセンサー / 情報理論 / レザバーコンピューティング / 機械学習

Outline of Annual Research Achievements

本年度はソフトロボットのセンシングならびに自律制御に対して、リザバー計算ならびに物理リザバー計算の両方のアプローチを用いて研究を行った。まずセンシングに関して言うと、これまで通り、人工筋肉の長さ推定を高精度で実現できるリザバー計算に取り組んだ。また、やわらかいマテリアルを含めた連続体の姿勢推定を実現するために動画から連続体の中心線を抽出するアルゴリズムを開発し、現在、その中心線を動画からではなく、連続体内部に埋め込まれたセンサーとそれを入力として受けとるリザバー計算を使って、エミュレートする研究にとりかかっている。同様の発想で、流体を介したタッチセンサーの開発も行った。またリザバー計算とは少し離れるが、センシング課題として人工筋肉を活用した攪拌ポンプの内容物の混ざり具合を内部のセンサーとロジスティック回帰を組み合わせて推定するというタスクにも取り組んだ。次に、物理リザバー計算としては、飛翔ロボットの羽がリザバーとして機能することを発見し、ジャーナル論文として報告した。ここではフレキシブルセンサーを羽に埋め込み、その羽のダイナミクスをモニターすることでレザバーとして活用し、風向き推定が実現できることを明らかにした。また現在、フレキシブルセンサーを活用してやわらかい身体と環境の結合をうまく利用して、計算を空間的に離れた場所で実装する技術の開発に着手した。自律制御に関しては、高次元のカオスを実装したリザバーを上手く活用することで様々なリミットサイクルやカオス軌道そしてカオス的遍歴が設計可能となる手法を提案した。この手法は将来的に物理リザバー計算の形で導入される予定である。本年度は物理リザバー計算の簡単な総説をソフトロボットの観点から執筆した。

Current Status of Research Progress

2: Research has progressed on the whole more than it was originally planned.

Reason

本年度はリザバー計算ならびに物理リザバー計算を用いたセンシングと自律制御を実装することを目的とした。結果として、こちらが想定していなかった様々な結果を得ることができた。まず、フレキシブルセンサーを水の中で激しく動かす実験を繰り返し行うことでやわらかいマテリアルと水の結合を使って入力の影響が離れた場所にある物体にも伝わり、一般化同期することで計算資源として活用できることがわかった。この結果は現在論文にまとめている段階にある。

Strategy for Future Research Activity

今後はフレキシブルセンサーを導入した物理リザバー計算を用いて、引き続き各種ソフトロボットにおけるセンシングならびに自律制御の実装を目指す。特に本年度論文として発表した高次元カオスを活用したリザバー計算とやわらかいマテリアルのダイナミクスが組み合わさった際にどのような特性が生じるかに関して詳しく解析を行う予定である。この解析は脳にカオスが発見されることと生物の身体がやわらかいことの間に何かしら不変的な関係が存在することを明らかにするかもしれない。

Research Products

• [Journal Article] Skeletonizing the Dynamics of Soft Continuum Body from Video (2021)
  • Author(s): Inoue Katsuma、Kuniyoshi Yasuo、Kagaya Katsushi、Nakajima Kohei
  • Journal Title: Soft Robotics Volume: -
  • DOI: 10.1089/soro.2020.0110
  • Peer Reviewed / Open Access
• [Journal Article] Simple reservoir computing capitalizing on the nonlinear response of materials: theory and physical implementations (2021)
  • Author(s): S. Kan, K. Nakajima, Y. Takeshima, T. Asai, Y. Kuwahara, M. Akai-Kasaya
  • Journal Title: Physical Review Applied Volume: 15 Pages: 024030-024030
  • DOI: 10.1103/physrevapplied.15.024030
  • Peer Reviewed / Int'l Joint Research
• [Journal Article] Flapping‐Wing Dynamics as a Natural Detector of Wind Direction (2021)
  • Author(s): Tanaka Kazutoshi、Yang Shih-Hsin、Tokudome Yuji、Minami Yuna、Lu Yuyao、Arie Takayuki、Akita Seiji、Takei Kuniharu、Nakajima Kohei
  • Journal Title: Advanced Intelligent Systems Volume: 3 Pages: 2000174-2000174
  • DOI: 10.1002/aisy.202000174
  • Peer Reviewed / Open Access
• [Journal Article] Input-driven bifurcations and information processing capacity in spintronics reservoirs (2020)
  • Author(s): N. Akashi, T. Yamaguchi, S. Tsunegi, T. Taniguchi, M. Nishida, R. Sakurai, Y. Wakao, K. Nakajima
  • Journal Title: Physical Review Research Volume: 2 Pages: 043303-043303
  • DOI: 10.1103/physrevresearch.2.043303
  • Peer Reviewed / Open Access
• [Journal Article] Designing spontaneous behavioral switching via chaotic itinerancy (2020)
  • Author(s): K. Inoue, K. Nakajima, Y. Kuniyoshi
  • Journal Title: Science advances Volume: 6 (46)
  • DOI: 10.1126/sciadv.abb3989
  • Peer Reviewed / Open Access
• [Journal Article] Step-like dependence of memory function on pulse width in spintronics reservoir computing (2020)
  • Author(s): T. Yamaguchi, N. Akashi, K. Nakajima, H. Kubota, S. Tsunegi, T. Taniguchi
  • Journal Title: Scientific Reports Volume: 10 Pages: 19536-19536
  • DOI: 10.1038/s41598-020-76142-x
  • Peer Reviewed / Open Access
• [Journal Article] Periodic structure of memory function in spintronics reservoir with feedback current (2020)
  • Author(s): T. Yamaguchi, N. Akashi, S. Tsunegi, H. Kubota, K. Nakajima, T. Taniguchi
  • Journal Title: Physical Review Research Volume: 2 Pages: 023389-023389
  • DOI: 10.1103/physrevresearch.2.023389
  • Peer Reviewed / Open Access
• [Journal Article] Physical reservoir computing---an introductory perspective (2020)
  • Author(s): K. Nakajima
  • Journal Title: Japanese Journal of Applied Physics Volume: 59 Pages: 060501-060501
  • DOI: 10.35848/1347-4065/ab8d4f
  • Peer Reviewed / Open Access
• [Journal Article] Shape reconstruction of CCD camera-based soft tactile sensors (2020)
  • Author(s): G. Soter, H. Hauser, A. Conn, J. Rossiter, K. Nakajima
  • Journal Title: Proceedings of 2020 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS) Volume: IROS Pages: 8957-8962
  • DOI: 10.1109/iros45743.2020.9341698
  • Peer Reviewed
• [Journal Article] Emulating a sensor using soft material dynamics: A reservoir computing approach to pneumatic artificial muscle (2020)
  • Author(s): R. Sakurai, M. Nishida, H. Sakurai, Y. Wakao, N. Akashi, Y. Kuniyoshi, Y. Minami, K. Nakajima
  • Journal Title: Proceedings of 2020 3rd IEEE International Conference on Soft Robotics (RoboSoft) Volume: Robosoft Pages: 710-717
  • DOI: 10.1109/robosoft48309.2020.9115974
  • Peer Reviewed
• [Journal Article] Mixing State Estimation of Peristaltic Continuous Mixing Conveyor with Distributed Sensing System Based on Soft Intestine Motion (2020)
  • Author(s): K. Wakamatsu, K. Inoue, D. Hagiwara, H. Adachi, D. Matsui, S. Kurumaya, R. Nishihama, M. Okui, K. Nakajima, Y. Kuniyoshi, T. Nakamura
  • Journal Title: Proceedings of 2020 3rd IEEE International Conference on Soft Robotics (RoboSoft) Volume: Robosoft Pages: 208-214
  • DOI: 10.1109/robosoft48309.2020.9116058
  • Peer Reviewed
• [Journal Article] 軟材料の内部ダイナミクスを利用した精密制御 (2020)
  • Author(s): 西田三博、櫻井良、若尾泰通、明石望洋、南友菜、中嶋浩平
  • Journal Title: 油空圧技術 Volume: vol.59, no.12 Pages: 45-52
• [Journal Article] Algebraic approach towards the exploitation of "softness": the input-output equation for morphological computation (2020)
  • Author(s): M. Komatsu, T. Yaguchi, K. Nakajima
  • Journal Title: The International Journal of Robotics Research Volume: 0278364920912298 Pages: 1-20
  • DOI: 10.1177/0278364920912298
  • Peer Reviewed
• [Journal Article] Effect of recurrent infomax on the information processing capability of input-driven recurrent neural networks (2020)
  • Author(s): Takuma Tanaka, Kohei Nakajima and Toshio Aoyagi
  • Journal Title: Neuroscience Research Volume: - Pages: 225-233
  • DOI: 10.1016/j.neures.2020.02.001
  • Peer Reviewed / Open Access
• [Journal Article] Optimal short-term memory before the edge of chaos in driven random recurrent networks (2019)
  • Author(s): Taichi Haruna, Kohei Nakajima
  • Journal Title: Physical Review E Volume: 100 Pages: 062312-062312
  • DOI: 10.1103/physreve.100.062312
  • Peer Reviewed
• [Journal Article] Synchronization and chaos in a spin torque oscillator with a perpendicularly magnetized free layer (2019)
  • Author(s): T. Yamaguchi, N. Akashi, K. Nakajima, S. Tsunegi, H. Kubota, T. Taniguchi
  • Journal Title: Physical Review B Volume: 100 Pages: 224422-224422
  • DOI: 10.1103/physrevb.100.224422
  • Peer Reviewed
• [Journal Article] Chaos in nanomagnet via feedback current (2019)
  • Author(s): T. Taniguchi, N. Akashi, H. Notsu, M. Kimura, H. Tsukahara, K. Nakajima
  • Journal Title: Physical Review B Volume: 100 Pages: 174425-174425
  • DOI: 10.1103/physrevb.100.174425
  • Peer Reviewed
• [Journal Article] Physical reservoir computing based on spin torque oscillator with forced synchronization (2019)
  • Author(s): S. Tsunegi, T. Taniguchi, K. Nakajima, S. Miwa, K. Yakushiji, A. Fukushima, S. Yuasa, H. Kubota
  • Journal Title: Applied Physics Letters Volume: 114 Pages: 164101-164101
  • DOI: 10.1063/1.5081797
  • Peer Reviewed
• [Journal Article] 物理リザバー計算の射程-ソフトロボットを例に (2019)
  • Author(s): 中嶋浩平
  • Journal Title: システム/制御/情報(「システム工学を変革するソフトロボット学」特集号) Volume: 63 (12) Pages: 505-511
  • Peer Reviewed
• [Journal Article] スピントルク発振器を用いた物理リザバー計算 (2019)
  • Author(s): 常木澄人、谷口知大、三輪真嗣、中嶋浩平、久保田均
  • Journal Title: まぐね Volume: 14 (6)
  • Peer Reviewed
• [Journal Article] ダイナミクスによる情報処理―レザバー計算の最近の発展 (2019)
  • Author(s): 中嶋浩平、田中琢真、青柳富誌生
  • Journal Title: 日本物理学会誌（シリーズ「人工知能と物理学」） Volume: 74 (5) Pages: 306-313
  • Peer Reviewed
• [Journal Article] ソフトロボットにおけるPhysical Reservoir Computing (2019)
  • Author(s): 中嶋浩平、竹井邦晴
  • Journal Title: 日本機械学会誌（特集「ソフトロボット学」） Volume: 122 (1205) Pages: 28-29
  • Peer Reviewed
• [Journal Article] Boosting computational power through spatial multiplexing in quantum reservoir computing (2019)
  • Author(s): K. Nakajima, K. Fujii, M. Negoro, K. Mitarai, M. Kitagawa
  • Journal Title: Physical Review Applied Volume: 11 Pages: 034021-034021
  • DOI: 10.1103/physrevapplied.11.034021
  • NAID: 130007509081
  • Peer Reviewed / Open Access
• [Journal Article] Spatiotemporal dynamics driven by the maximization of local information transfer (2019)
  • Author(s): K. Nakajima, T. Haruna
  • Journal Title: New Journal of Physics Volume: 21 Pages: 013034-013034
  • DOI: 10.1088/1367-2630/ab0039
  • Peer Reviewed / Open Access
• [Journal Article] Information Processing Capability of Soft Continuum Arms (2019)
  • Author(s): E. A. Torres, K. Nakajima, I. S. Godage
  • Journal Title: Proceedings of 2019 IEEE Conference on Soft Robotics (RoboSoft) Volume: in press
  • Peer Reviewed / Int'l Joint Research
• [Journal Article] 柔らかいマテリアルの変形を用いた情報処理 (2019)
  • Author(s): 中嶋浩平、井上克馬、國吉康夫、Sophon SOMLOR、Tito Pradhono TOMO、Alexander SCHMITZ
  • Journal Title: 電子情報通信学会誌（小特集「リザバーコンピューティング」） Volume: 102巻2号 Pages: 121-126
  • Peer Reviewed
• [Journal Article] Evaluation of memory capacity of spin torque oscillator for recurrent neural networks (2018)
  • Author(s): Tsunegi Sumito、Taniguchi Tomohiro、Miwa Shinji、Nakajima Kohei、Yakushiji Kay、Fukushima Akio、Yuasa Shinji、Kubota Hitoshi
  • Journal Title: Japanese Journal of Applied Physics Volume: 57 Issue: 12 Pages: 120307-120307
  • DOI: 10.7567/jjap.57.120307
  • NAID: 210000149834
  • ISSN: 0021-4922, 1347-4065
  • Peer Reviewed
• [Journal Article] やわらかい身体のダイナミクスに計算をアウトソースする (2018)
  • Author(s): 中嶋浩平
  • Journal Title: 人工知能（特集「自然界に見いだす数物構造を利用した知的情報処理」） Volume: 33巻5号 Pages: 570-576
  • NAID: 190000007402
  • Peer Reviewed
• [Presentation] 物理リザバー計算 (2021)
  • Author(s): 中嶋浩平
  • Organizer: 2021日本数学会年会（応用数学 (第VIII会場)）
  • Invited
• [Presentation] Designing chaotic itinerancy (2021)
  • Author(s): Kohei Nakajima
  • Organizer: International Conference: Differential Equations for Data Science 2021 (DEDS2021)
  • Int'l Joint Research / Invited
• [Presentation] 高次元カオスを用いてダイナミクスを設計する (2020)
  • Author(s): 中嶋浩平
  • Organizer: MIMS 現象数理学研究拠点 共同研究集会2020年度「幾何学・連続体力学・情報科学の交差領域の探索」
  • Invited
• [Presentation] Physical Reservoir Computing: タコ腕コンピュータを例に (2020)
  • Author(s): 中嶋浩平
  • Organizer: 東京大学次世代知能科学研究センター連続シンポジウム 第一回「次世代の知能科学に向けて」
  • Invited
• [Presentation] Physical Reservoir Computing for Soft Robots (2020)
  • Author(s): Kohei Nakajima
  • Organizer: NOLTA 2020 Special session "Physical Reservoir Computing"
  • Int'l Joint Research / Invited
• [Presentation] ソフトロボット学における情報処理（基礎から） (2020)
  • Author(s): 中嶋浩平
  • Organizer: 第1回ソフロボ数理勉強会（新学術領域「ソフトロボット学」ソフロボ数理勉強会主催）
  • Invited
• [Presentation] Physical Reservoir Computing for Soft Robots (2020)
  • Author(s): Kohei Nakajima
  • Organizer: ICRA 2020 Workshop on Self-Assembling and Reconfigurable Systems
  • Int'l Joint Research / Invited
• [Presentation] Input-driven bifurcations in spintronics reservoir computing (2020)
  • Author(s): Nozomi Akashi, Terufumi Yamaguchi, Sumito Tsunegi, Tomohiro Taniguchi, Mitsuhiro Nishida, Ryo. Sakurai, Yasumichi Wakao, Kohei Nakajima
  • Organizer: Second Symposium on Machine Learning and Dynamical Systems
• [Presentation] Unpredictable as dice: analyzing riddled basin structures in a passive dynamic walker (2019)
  • Author(s): N. Akashi, K. Nakajima, Y. Kuniyoshi
  • Organizer: Proceedings of 2019 International Symposium on Micro-NanoMechatronics and Human Science (MHS)
  • Int'l Joint Research
• [Presentation] Soft bodies as input reservoir: role of softness from the viewpoint of reservoir computing (2019)
  • Author(s): K. Inoue, K. Nakajima, Y. Kuniyoshi
  • Organizer: Proceedings of 2019 International Symposium on Micro-NanoMechatronics and Human Science (MHS)
  • Int'l Joint Research
• [Presentation] Echo State Property of Neuronal Cell Cultures (2019)
  • Author(s): T. Kubota, K. Nakajima, H. Takahashi
  • Organizer: Lecture Notes in Computer Science (vol 11731): International Conference on Artificial Neural Networks (ICANN2019)
  • Int'l Joint Research
• [Presentation] Information Processing Capability of Soft Continuum Arms (2019)
  • Author(s): E. A. Torres, K. Nakajima, I. S. Godage
  • Organizer: Proceedings of 2019 2nd IEEE International Conference on Soft Robotics (RoboSoft)
  • Int'l Joint Research
• [Presentation] Differential Algebraic Method for Direct Evaluation of Computational Capabilities of Physical Reservoirs (2019)
  • Author(s): M. Komatsu, T. Yaguchi, K. Nakajima
  • Organizer: Proceedings of the 2019 International Symposium on Nonlinear Theory and its Applications (NOLTA2019)
  • Int'l Joint Research
• [Presentation] Towards a novel information processing scheme for soft robots (2019)
  • Author(s): Kohei Nakajima
  • Organizer: 30th 2019 International Symposium on Micro-NanoMechatronics and Human Science (From Micro & Nano Scale Systems to Robotics & Mechatronics Systems)
  • Int'l Joint Research / Invited
• [Presentation] 物理リザバー計算の射程:ソフトロボットを例に (2019)
  • Author(s): 中嶋浩平
  • Organizer: 第80回応用物理学会秋季学術講演会シンポジウム：FS.AIエレクトロニクス「数理がひもとく自然・生命現象と知的計算能力」
  • Invited
• [Presentation] しなやかな知能を育てる --ソフトロボットにおけるフィジカルリザバーコンピューティング-- (2019)
  • Author(s): 中嶋浩平
  • Organizer: 2019年度日本機械学会年次大会(特別企画プログラム先端技術フォーラム機素潤滑設計部門企画ソフトロボット学)
  • Invited
• [Presentation] Physical Reservoir Computingの射程:ソフトロボットへの応用を例に (2019)
  • Author(s): 中嶋浩平
  • Organizer: 京都大学大学院理学研究科/理学部数学教室談話会
  • Invited
• [Presentation] Physical Reservoir Computing for Soft Robots (2019)
  • Author(s): Kohei Nakajima
  • Organizer: The First International Workshop on Theoretical and Experimental Material Computing (TEMC 2019)
  • Int'l Joint Research / Invited
• [Presentation] Permutation分布に基づくコンセプトドリフトの検出 (2019)
  • Author(s): 枡井啓貴, 中嶋浩平, 青柳富誌生
  • Organizer: 日本物理学会第74回年次大会
• [Presentation] Soft Keyboard: A Novel User Interface for Soft Devices (2018)
  • Author(s): K. Nakajima, K. Inoue, Y. Kuniyoshi, S. Somlor, T. P. Tomo, A. Schmitz
  • Organizer: The 2018 International Symposium on Nonlinear Theory and Its Applications (NOLTA2018)
  • Int'l Joint Research / Invited
• [Presentation] A Recipe for Designing Chaotic Itinerancy: Innate Training Approach (2018)
  • Author(s): K. Inoue, K. Nakajima, Y. Kuniyoshi
  • Organizer: The 2018 International Symposium on Nonlinear Theory and Its Applications (NOLTA2018)
  • Int'l Joint Research / Invited
• [Presentation] Reservoir Computingの展開 (2018)
  • Author(s): 中嶋浩平
  • Organizer: RIMS共同研究「統計的モデリングと予測理論のための統合的数理研究と実践」
  • Invited
• [Presentation] Reservoir Computingの展開 (2018)
  • Author(s): 中嶋浩平
  • Organizer: IBISML/PRMU/CVIM合同研究会にて招待講演（FIT2018と同時開催）
  • Invited
• [Presentation] Spatiotemporal dynamics driven by maximization of local information transfer (2018)
  • Author(s): 中嶋浩平, 春名太一
  • Organizer: 日本生物物理学会第56回年会
• [Presentation] Maximizing Local Information Transfer in Boolean Networks (2018)
  • Author(s): 春名太一, 中嶋浩平
  • Organizer: 日本生物物理学会第56回年会
• [Presentation] Soft Interfaces: Linking Morphological Dynamics and Information Processing (2018)
  • Author(s): K. Nakajima
  • Organizer: IROS 2018 Workshop on Controlling Soft Robots: Model-based vs. Model-free Approaches
  • Int'l Joint Research / Invited
• [Presentation] Physical Reservoir Computing for Soft Robots (2018)
  • Author(s): K. Nakajima
  • Organizer: IROS 2018 Workshop on Soft Robotic Modeling and Control: Bringing Together Articulated Soft Robots and Soft-Bodied Robots
  • Int'l Joint Research / Invited
• [Presentation] やわらかいマテリアルを用いた機械学習法：Reservoir Computingの展開 (2018)
  • Author(s): 中嶋浩平
  • Organizer: ものづくり企業に役立つ応用数理手法の研究会（第26回技術セミナー）
  • Invited
• [Remarks] ソフトロボット学の創成
  • URL: http://softrobot.jp/
• [Patent(Industrial Property Rights)] 推定装置、推定方法、プログラム、及び学習モデル生成装置 (2019)
  • Inventor(s): 櫻井良, 若尾泰通, 中嶋浩平
  • Industrial Property Rights Holder: 櫻井良, 若尾泰通, 中嶋浩平
  • Industrial Property Rights Type: 特許
  • Industrial Property Number: 2019-229782
  • Filing Date: 2019
• [Funded Workshop] A full-day workshop, "Toward the Nature of Information Processing in Soft Machines: Bridging Flexible Electronics and Morphological Computation," in IEEE Robosoft 2019. (2019)