【导读】2023年6月15日,致力于亚太地区市场的国际领先半导体元器件分销商---大联大控股宣布,其旗下世平推出基于耐能(Kneron)KL630系列芯片的AI相机方案。
图示1-大联大世平基于耐能Kneron产品的AI相机方案的展示板图
AI技术的不断成熟让AI相机的应用得到了快速发展。当下,虽然AI相机的应用逐渐从安防监控扩展到智能家居、医疗、物流、无人驾驶等应用中,为人们提供更便捷、高效、安全的生活体验。但在摄像机和AI相机的开发过程中,仍有算法优化效率慢、视频形成质量低、数据响应延迟等诸多问题。为此,大联大世平基于Kneron KL630系列芯片推出了AI相机方案。
图示2-大联大世平基于耐能Kneron产品的AI相机方案的场景应用图
本方案所采用的Kneron KL630系列是专为各种专业和消费IP摄像机设计的新一代SoC,包含了KLM5301S3、KLM550S3、KLM5502S3等产品,可广泛用于安防、家用以及其他AI相机的设计与制造。
KL630系列采用TSMC 28nm先进制造工艺,支持快速开发高质量和多镜头相机应用程序,提供多达4通道视频输入、独立的高级多ISP管道(包括多曝光高动态范围融合)以及专门的视频质量增强功能,适用于多个宽-角度镜头和传感器,加上片上去扭曲、拼接和混合,所有这些都用于高质量的实时全景摄像机视频处理。其中还内嵌Kneron第三代神经网络架构内核,能及时反应并分辨特定物件,降低误判率。
图示3-大联大世平基于耐能Kneron产品的AI相机方案的方块图
Kneron的可重构NPU,使本方案支持同时运行CNN和Transformer网络,既可做机器视觉,也可运行语义分析,且运算能效优异。与仅面向特定应用的普通AI模型不同,Kneron的可重构人工神经网络(RANN)技术更加灵活,可满足不同应用需求并适应各种计算体系架构。并且搭载轻量级图像识别算法,可轻松实现人脸识别、身体与手势识别、物体与场景识别等。不仅如此,第五代ISP技术可以记录具有细节感知、真实色调层次和更低噪声的图像和视频。在系统中搭载的智能HEVC编码器能显著减少无用的数据,并在不中断网络带宽的情况下保持高质量视频。不仅如此,支持180°/360°多通道鱼眼去扭曲引擎,结合了高性能硬件加速鱼眼去扭曲器,允许实时去扭曲过程以显著节省CPU负载,并灵活支持各种鱼眼的几何校正/广角镜头提供业界领先的全景视频形成质量。此外,该方案同步提供AP函数,方便客户快速上手,另外根据影像的位置可以进行不同的配置调整。
通过这些优势,本方案能够为终端用户提供更高性能、低功耗以及高性价比特点,以卓越成像品质赋能AI相机应用。
核心技术优势:
● 可重构NPU;
● 影像辨别软件;
● 第五代ISP可以记录具有可感知细节、真实色调层次和更低噪声的图像和视频;
● 智能HEVC编码器尽可能显著减少无用或不重要的数据,并在不中断网络带宽的情况下保持高质量的视频;
● 鱼眼引擎去扭曲、拼接、混合;
● 智能视频分析;
● 音频增强和智能;
● 高效能的应用工具PQ Tool跟Fisheye Correction Tool。
方案规格:
● KL630系列之AI相机KLR5S3 Series(Car DVR)、KLI5S3 Series(Industrial Cam)。
推荐阅读: