智能影像跃升,由终端侧AI来助力

2023-12-21  

利用出色的AI性能进一步提升的能力向来是骁龙的突出优势。第三代移动平台,将高性能AI注入整个平台系统,为用户带来前所未有的AI体验。

本文引用地址:

进阶,AI助力

毫无疑问,AI时代已经悄然到来,生成式AI正不断展现出蓬勃的创造力和想象力。第三代作为高通首个专为生成式AI打造的移动平台,集终端侧智能、强悍性能和能效于一体,能够以超高速度处理生成式AI任务,进一步推动生成式AI向终端侧规模化扩展。

图片

相较上一代平台,第三代的Hexagon NPU AI性能提升高达98%,能效提升高达40%。如面向70亿参数大语言模型,第三代骁龙8可实现每秒处理20个token;或仅需不到一秒就能使用Stable Diffusion在上生成图像。如此强劲的AI性能,为移动影像带来了超乎想象的体验革新。

于细节处,还原美好

在高通AI引擎的加持下,第二代骁龙8带来了行业首个认知ISP,这项先进的AI技术能够通过实时语义分割实现照片和视频的自动增强。如今,全新第三代骁龙8让认知ISP再次升级,将其可识别的语义层数从8层提升至12层,这将大幅增加照片中可增强元素的数量,让手机摄像头捕捉到的每一层语义信息都能获得专业的、独立的优化效果。全新升级的认知ISP将让手机拍摄实现全新水平的图像质量。

图片

AI的注入,让图片背景实现智能扩增、消除或填充图像元素成为可能。通过与慧鲤科技合作,第三代骁龙8带来了一项全新特性“照片扩充”,它能基于图片内容,重构照片缺失的部分,让心仪的照片不留任何缺憾。如扩大图片背景画幅,让美好景色大幅“入镜”,独具广角效果。

图片

第三代骁龙8还带来了让人惊艳的HDR色彩,通过与杜比合作,第三代骁龙8为引入了首个用于照片拍摄的杜比HDR技术。该技术可支持用户以10-bit色深和Rec 2020色域标准进行拍摄,使照片拥有超过10亿种色彩,并保留更高动态范围和细节。此外,杜比视界照片可以完全向后兼容每个支持JPEG的应用和服务。

图片

于繁复中,锁定焦点

短视频/Vlog越来越多地成为人们记录生活的重要形式,然而,视频格式的处理相比图片要复杂许多。面向视频拍摄和处理,第三代骁龙8带来了“视频物体智能消除”特性。针对视频中想要移除的人或物体,只需轻按即可删除,使视频画面可以更好地聚焦于拍摄主体,完美视频轻松搞定。

图片

将前置镜头拍摄的人物主体,轻巧地融入后置镜头拍摄的画面中,为剪辑工作带来更为轻松和智能的处理方式。第三代骁龙8推出的“Vloggers View”将极大地提升Vlog创作的便利性,它支持前置和后置摄影头同时进行拍摄,然后借助认知ISP移除前置镜头中的背景,让人物主体完美地置身于后置镜头拍摄的画面中。借助这一突破性特性,Vlog创作者可以省去繁杂的后期处理,实现“边拍边解说”、或是在演唱会现场来一期“沉浸式跟唱”。

图片

面向第三代骁龙8进行调优的多项图像传感器,也将助力骁龙影像质量提升至全新高度。通过持续与三星合作,第三代骁龙8可为用户带来全新的2亿像素体验。三星最新的Zoom Anyplace技术由AI赋能,可以自动实时跟踪和捕捉拍摄主体,让主体在视频中始终保持清晰。

于暗光处,窥见色彩

一直以来,骁龙在支持低光、夜景拍摄场景下都为用户带来卓越表现。现在,第三代骁龙8携手Visionary AI,让暗光拍摄再次绽放全新光彩,在低至0.2Lux的亮度下也能拍摄出色彩鲜明的视频,让手机从此拥有超越人眼的夜视功能。

图片

第三代骁龙8集成了全新的帧率转换引擎,也将助力智能手机在低光条件下拍摄出更流畅的视频。帧率转换引擎可以基于拍摄的视频生成新的帧,如将30fps的视频转换为具有流畅运动和出色画质的60fps视频。

除此之外,第三代骁龙8还支持HDR图像传感器技术——Dual Converion Gain(DCG双转换增益),双转换增益传感器能够将像素结合,使用更长的曝光时间来捕捉更多光线,从而在暗光环境下带来令人惊叹的照片拍摄。

图片

从图片调优到视频增强,第三代骁龙8凭借突破性的AI能力,将赋能更多智能旗舰终端带来丰富的、个性的先进影像体验,让用户可以直观感知到终端侧AI的无限潜能。

文章来源于:电子产品世界    原文链接
本站所有转载文章系出于传递更多信息之目的,且明确注明来源,不希望被转载的媒体或个人可与我们联系,我们将立即进行删除处理。