生物感觉运动系统能够获取外部信息,并以电化学信号的形式将外部信息传递给内部神经系统,进而产生运动反馈,从而构建与外界的交互作用。作为推动人机协作发展的动力,灵活的触觉神经形态设备正变得越来越重要。然而,用人工智能完成并进一步超越人类智能,仍面临诸多障碍。
中国科学院深圳先进技术研究院(SIAT)Yanlong Tai和Guanglin Li课题组,联合马克斯普朗克聚合物研究所Paschalis Gkoupidenis提出了一种自供电可拉伸三维远程触觉装置 (3D-RTD),它通过导电介电异质结构执行外部机械运动的景深 (DOF) 感觉。该装置可以精确地建立外部活动物体的自由度运动与双极符号、频率、幅度等感觉电位信号之间的逻辑关系。基于静电理论和多物理场建模揭示了感觉机制,性能为通过具有微/宏观相互作用的人工-生物混合系统进行验证。用一只老鼠系统地证明了 3D-RTD 作为盲人避障贴片的可行性。这项工作为多模态神经形态装置铺平了道路,该装置超越了生物装置的功能,朝着类脑智能的新模式发展。
图1:生物和人工感觉运动系统的示意图。(A) 生物感觉运动系统。(i 至 iii) 当接触刺激施加于皮肤表面时,会产生兴奋电位并沿感觉神经和突触传递至脊髓/大脑。(iv to vi) 然后,动作电位通过运动神经传递,并有助于神经肌肉接头,从而最终引起相应的活动。(B) 人工和增强的感觉运动系统。(i 到 iii) 在人工 3D-RTS 中,DOF 机械刺激触发 3D-RTD 通过静电极化和电子转移产生感觉电位尖峰。(iv to vi) 然后,动作电位通过中央集成电路传递以激活肌肉收缩。
图2:3D-RTD的实验和模拟结果。(A) 柔性和可拉伸自供电 3D-RTD 的光学和扫描电子显微镜图像。(B) 插图显示了 3D-RTD 的工作原理,外部自然带电的活性物体与构建的导电-介电异质结构之间的相互作用增强。(C) COMSOL 进行有限元模拟,以呈现带电有源物体接近或远离时 3D-RTD 内部的 3D 电场强度和相应的 2D 电场线的变化。活动物体的运动模式与相应的电位信号之间的关系:(D)接近分离运动,(E)可变末端高度,和(F)可变运动频率。请注意,除非另有说明,否则 3D-RTD 在所有测试期间都通过电极保持接地。(C) COMSOL 仿真中的电场线总数设置为 15,以更好地呈现传感变化。在所有实验中都使用具有天然负电荷的 PVDF 薄膜作为活性物体,没有电极化。对于 (D) 到 (F),活动对象在垂直于 3D-RTD 表面的方向上移动,运动频率代表一轮运动时间的倒数。(G to I) 4通道电极3D-RTD的3D传感功能及相关编码,其中[1]/[1']表示正/弱正信号,[0]/[0']表示负/弱负信号。
图3:集成到神经肌肉系统中的人工 3D-TDS。(A) 系统 I 的示意图,3D-RTS:获取自由度机械运动,3D-RTD 附着在大鼠背部;系统II,刺激和力测量系统:来自系统I的感觉电位被同步传输到具有放大的神经生理刺激器。正信号传送到刺激电极1,刺激大鼠胫骨前肌;负信号被传送到刺激电极2以刺激小腿三头肌。(B) 大鼠实验条件的数字图像:分别与腓总神经和胫神经相连的刺激电极 1 和 2。(C) 感觉信号与从活大鼠同步获得的响应足部位置之间的关系,分别无刺激和无响应(零)、物体接近和踝关节屈曲(+)、物体分离和踝关节伸展(-)。(D) 上述三种情况下对应的肌电信号之间的关系。(E) 连续信号曲线显示感觉电位与后肢响应伸展或屈曲肌肉收缩力之间的关系。(F 和 G)与活动物体的运动高度和频率相对应的力响应的量化。
图4:基于3D-RTS的避障应用。示意图:(A)传统和我们在盲人避障方面的比较,(B)通过大脑活动和运动反馈来验证 3D-RTD 在 DOF 感知中的可行性。(C) 实验场景正面示意图:一只老鼠在昏暗的平台上奔跑。(D) 刺激后体感诱发电位 (SEP) 的记录:来自单个通道的原始痕迹,经过八次试验。(E) 目标大鼠实时足迹的平台底视图数字图像,其中黑色标记表示障碍物的位置。较大的版本显示了正常/异常大鼠身体方向和完整/不完整足迹的比较。(F) 步态分析的定量结果:打印面积和摆动速度。灰色阴影区域代表进入和之后的感觉。
作者已经展示了一种可拉伸的自供电 3D-RTD,它能够基于其导电-介电异质结构识别 3D 空间中活动物体的自由度运动。它可以逻辑地识别接近分离运动,距离可达 20 厘米,频率从 0.0625 到 5 赫兹。在静电理论和COMSOL有限元分析的基础上揭示了相关机理,并通过调节异质材料的介电常数来优化感官性能。基于3D-RTD作为虚拟突触在信号传输和连接方面的特点,我们未来的目标是深入研究导电-介电异质结构相互作用的机制,实现更多更接近真实的功能。突触。通过构建人工-生物一体化触觉系统,协同实现虚拟和生物突触电子/离子之间的微观相互作用以及外部自由度机械运动和大鼠运动反馈之间的宏观相互作用,验证了3D-RTD作为神经形态装置的可行性。此外,在避障场景中验证了 3D-RTD 作为感觉替代和感知增强的神经接口贴片的实际应用,其中配备该设备的大鼠显示感觉-感知-交互神经过程。该设备和混合系统都具有很高的感官准确性,这使得该设备对于交互的安全性特别理想。预计 3D-RTD 与生物触觉相辅相成,可以显着增强其形态。该设备可以通过数字打印轻松集成和低成本批量生产,这是 HI-AI 交互和增强的一大进步。提出的概念可以进一步促进一系列应用的开发,特别是在基于类脑和混合智能的交互领域。
【参考文献】
https://www.science.org/doi/10.1126/sciadv.abo5314
无法设置外链,请点击下方阅读全文浏览。
【相关阅读】
...................................................
WEST可穿戴电子b微信群开通。欢迎加入、推荐、分享和交流,谢谢!
该平台免费提供相关领域的论文宣传和招生招聘,有兴趣请关注订阅号给小编留言或者邮件联系 E-mail:wonger.west@gmail.com