炫黑科技:神经形态传感&处理3D集成芯片

2023-06-25  

15dfbe56dd9d8d381016d3faff8e0fd2_640_wx_fmt=png&wxfrom=5&wx_lazy=1&wx_co=1.png


2022年底,欧盟启动Nimble AL这一前沿项目,旨在实现神经形态视觉传感技术升级。作为Codasip的创新孵化器,Codasip Labs一直在探索未来新技术的应用,并于近期加入Nimble AL项目,为其开发一个RISC-V可定制内核,赋能神经形态传感3D集成芯片。


1757a832d9d1705853ed3fc1fac5edea_640_wx_fmt=png&wxfrom=5&wx_lazy=1&wx_co=1.png


NimbleAI作为一个为期3年、耗资1000万欧元的研究项目,汇集了来自欧盟和英国的商业组织和学术界的合作伙伴。该项目由欧盟资助,旨在设计一个神经形态传感和处理的三维集成芯片。而这一炫黑科技的灵感来自于眼睛对光线的探测和大脑对视觉信息的处理。


显而易见,这是一个受生物学启发的前沿技术,目标是提高下一代基于事件的视觉传感的神经形态芯片的能源效率和性能。如果一切按计划进行,那么创建一个完整的神经形态架构,赋能终端设备有效准确地运行和多样化的计算机视觉算法。目前这些应用设备通常在资源和面积上受到限制。典型的应用领域包括手持和电池供电的医疗成像设备、自动驾驶车辆智能显示器,可穿戴的眼球追踪眼镜等等。


df79eb50698df33247964cce024453a3_640_wx_fmt=jpeg&wxfrom=5&wx_lazy=1&wx_co=1.jpg


将生物系统作为电子系统的 "黄金基准 "是近些年来的一个技术趋势。受到生物学的启发,NimbleAI正在利用生物眼脑系统作为其系统架构。该项目正在实施一个始终在线的传感阶段,高度专业化的事件驱动处理内核和神经网络,以使用最少的能量对选定的刺激进行视觉推理。


be52d3a3ffd813cc76f5a08f66a88260_640_wx_fmt=png&wxfrom=5&wx_lazy=1&wx_co=1.png


Codasip在该项目中积极探索RISC-V ISA在内存加速器中的扩展,这些加速器由合作伙伴CEA提供。RISC-V的定制有助于提高神经形态芯片的性能并降低其功耗。为了实现这一目标,我们选用了Codasip Studio工具和CodAL架构描述语言,这些工具促使定制工作流程变得直接便捷。之后由Codasip开发的RISC-V内核再映射到Menta SAS的eFPGA上。


改变游戏规则的炫黑技术


目前在NimbleAI项目中,Codasip团队正在开发基于RISC-V的下一代人工智能处理器。同时这也是Codasip Labs的系列项目中的一个完美案例。Codasip Labs专注于关键应用领域,包括安全、功能安全和AI/ML等等。以识别和构建技术,扩展定制计算的无限可能性为宗旨。通过定制的、领域专用设计,加快差异化产品的上市时间,最终赢得市场青睐。在为期3年的NimbleAI项目结束时,与目前CPU或GPU处理基于帧的视频标准相比,我们期望看到重大的性能提升。该项目将实现新的功能和实际实现,以解锁更先进的人工智能和计算机视觉算法和应用。


文章来源于:电子工程世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。