中科院取得多模态神经感知研究进展，有助研发高智能机器人

图片地址：https://img.ithome.com/newsuploadfiles/2022/6/9b70135a-ceee-41f6-80f8-46d69c78e363.jpg

IT之家 6 月 12 日消息，据中国科学院官网消息，近日，中国科学院微电子研究所刘明院士团队和复旦大学教授刘琦团队在多模态神经形态感知研究方面取得进展。▲ 图 1 生物躯体感觉系统与人工体躯体感觉系统。a 人手感知杯子的温度、重量和水杯形状的示意图；b 由 MFSN 阵列和 SNN 分类器组成的人工躯体感觉系统模拟触觉感知的示意图。躯体感受系统中的多模态感知可帮助人们获得更全面的物体属性，并对物体的状态做出准确判断，尤其是不同受体的感觉信号在一定的条件下还可被神经元整合并发送到大脑皮层作进一步处理（图 1a）。与单模态感知相比，多模态融合感知在评估物体属性和提高物体识别精度方面具有明显优势。在传统的人工感知系统中，多模态信息的处理多采用串行计算架构，传感信号需转换为数字模式才能被处理器处理，产生了较大的功耗和通信带宽开销。此外，传统半导体技术在脉冲域构建这种多模态感知系统还面临着器件集成