高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)

随着移动设备的普及,我们已经进入全民Vlog的时代,人人均可上手拍摄视频,因此专注于影像拍摄的手机获得大众青睐,并不让人感到意外。而如今这些智能手机的影响拍摄无疑都基于软硬件协调,直出高动态范围的夜景、实现手持级别的超级防抖,还可以拍摄4K的高规格视频,越来越多的用户能真切地感受到手机在视频拍摄方面的体验升级。再比如像AI场景识别对画面观感的提升,或者拍录剪辑一体的使用体验,“智能”为手机拍摄赋能。在AI的加持下,手机拍摄的终点与上限将在何处,是个值得深思的问题。

在近日发布的众多机型中,搭载骁龙765G的OPPO Reno3 Pro不失为其中的佼佼者。不仅因集轻薄与时尚于一体的整机外观设计引发热议,其视频拍摄表现同样令人惊艳。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(1)

01 手机胜相机,骁龙765G立功劳

现在的手机芯片被称为SoC(System on Chip)而不仅仅是处理器,原因在于其包含完整的系统,并有嵌入软件的全部内容。其中既包含负责综合处理和调度的CPU、主要负责图像处理的GPU,还包括负责相机成像的ISP等等,这些组成部分各司其职,共同完成手机操作所需的算力输出。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(2)

以近来颇受瞩目的视频防抖为例,OPPO Reno3 Pro上搭载了视频超级双防抖。出色的防抖功能使其一经推出便稳占市场一席之地。视频防抖想必大家都不陌生,通过对主摄进行取景拍摄,裁切后进行增稳处理;特别之处是Reno3 Pro在主摄裁切的基础上进行OIS EIS增稳。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(3)

其中OIS光学防抖就是通过镜头的浮动透镜来纠正“光轴偏移”。详细来说,通过镜头内的陀螺仪侦测到微小的移动,然后将信号传至微处理器,处理器立即计算需要补偿的位移量,通过补偿镜片组,根据镜头的抖动方向及位移量加以补偿;从而有效地克服因相机的振动产生的影像模糊。处理器的计算与实时反馈就对镜头组的防抖起到决定性作用。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(4)

光学防抖原理

而其实EIS电子防抖是市面上的手机中使用得最多的防抖技术,无需任何元器件辅助也可实现,但其主要依赖于程序对传感器上的图像的分析和采集。当照片被拍糊时,利用边缘图像对模糊部分进行补偿,从而实现“防抖”。其防抖原理更像是对照片进行“后期处理”,依旧是算法与处理运算。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(5)

更不用提OPPO Reno3 Pro的视频超级防抖Pro,需要对超广角摄像头拍摄到的画面进行处理。超广角镜头拍到的画幅更广,相应的裁切增稳同样需要不小的算力支持。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(6)

高通骁龙765G SoC硬件体积

而上文中提到的视频防抖技术能够得到长足的进步,归根结底是如今的SoC所能支持的算力为海量的运算提供保证。OPPO Reno3 Pro——这部以视频录制见长的机型搭载了高通骁龙765G SoC,其第五代AI Engine的算力最高可以达到5.5 TOPS。硬件特性上,骁龙765G还支持16位4K HDR视频拍摄和HDR10 ,能够对每一帧画面进行动态元数据处理;此外,正是得益于高通此前推出的计算机视觉ISP(CV-ISP),Spectra 355 ISP 可支持高达1.92亿像素的摄像头,为影像录制打下良好基础 。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(7)

骁龙765G构成

并且骁龙765G配备的Kryo 475 CPU(最高主频2.4GHz)以及Adreno 620 GPU(速度提升20%)都是图像处理能力和AI算力的前提。很多功能可能大家经常用到,却并不一定了解背后有SoC运算和AI的处理:视频背景虚化、视频实时AI美颜、超级夜景以及逆光拍摄等场景,都是其具体的体现。

正是由于OPPO Reno3 Pro在视频拍摄上的优异表现,身边的一些专业编辑在面对“轻量化”的工作场景时,都会利用OPPO Reno3 Pro进行录制,而不是脚架 稳定器,其实这也与一般消费者的使用场景一致——随手记录,随拍即所得。

02 SoC搭配人工智能,开启手机拍摄的进阶之路

前面已经说过,SoC嵌入的各部分组件协同工作,为海量的运算提供基础算力,而人工智能引擎(AI Engine)能实现终端侧人工智能用户体验的加速。简单来说 ,AI Engine驱动软硬件协同合作,将不同的运算任务交给更擅长的部分去处理,从而实现最高的运算效率,这就是影像拍摄时用户能获得优质体验的奥秘。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(8)

这里其实也要为AI正名;AI早已不是一个营销词汇, 如今AI性能早已成为衡量SoC优劣的关键指标之一,或者说神经网络处理器(NPU)的作用逐渐被厂商们重视。具体来说,其负责相机场景识别、部分图像后期处理以及系统学习用户使用习惯,从而进行自动优化。骁龙765G搭载第五代AI Engine,AI性能可以实现5.5TOPS的运算能力,具备强大的图像处理能力和AI算力。

举个例子,如今只能手机搭载多颗摄像头已是常态,但涉及到多镜头的变焦切换,如何实现多颗镜头在视频拍摄时的“无缝变焦”,就需要你的手机更为“智能”才可以。通过高通第五代AI Engine支持多摄像头的平滑切换,从一个广角摄像头切换到长焦或超广角摄像头时也不会出现明显卡顿。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(9)

OPPO Reno3 Pro

再比如说有了AI Engine的加持,可以实现根据面部的状态、人体动作进行画面跟踪,确定人物的最佳拍摄位置,截取最佳的瞬间;或者支持拍摄图像的背景更换,呈现出完美的照片。这其实这些都是第五代AI Engine下的语义分割功能的体现。简单来说,该功能将整个图像或者视频分割为各个语义区域,针对各区域进行进行优化。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(10)

或者对于广大用户来说更为熟悉的“AI拍照”,实际上都离不开骁龙第五代AI Engine的功劳。超级夜景的多帧降噪、HDR、精准的脸部美颜、瘦身美体、大光圈效果模拟等等,甚至图片的后期识别处理也是骁龙AI Engine的一大优势功能。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(11)

OPPO Reno3 Pro夜景模式样张

此前高通就曾展示过手机本地进行的智能抠图、实时预览特效等,比如实时素描等更换取景器中的物体风格、智能人像发色更换等等;更不用提抓取被摄者的形体动作,实现人像视频优化、动作采集,上述应用能够为AR场景提供技术基础。第五代Qualcomm人工智能引擎AI Engine,为智能手机的影像指明了进阶方向。

03高通筑起多元AI生态,赋能手机视觉交互发展

高通对AI的侧重使其在该领域长期耕耘,从第一代AI平台骁龙820开始,到最新的高通第五代AI平台,高通的第五代AI Engine在性能层面显著提升。通过支持多镜头智能拍摄、4K HDR视频、以及高像素的ISP,体现出高通与影像结合的发展策略。以手机影像为基础的AI,已经充分体现出了巨大的发展潜力。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(12)

第五代AI Engine的巨大算力以及CPU和GPU共同协作等特性,同样适用于协调系统资源,提升游戏体验;除了能对于手机等影像处理能力和游戏体验有巨大提升,第五代AI Engine在智能翻译、文本精准扫描以及语音转文字等应用场景上同样进步巨大;AR游戏、实时3D人脸建模等功能,都是可以一窥未来的交互方式。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(13)

AR拍摄

基于第五代AI Engine,我们或许可以大胆预测AI会继续深入到更多的生活场景:当AR动作与人像视频采集技术进一步优化,AI功能不仅可以适用在拍照优化、机器视觉、自然语言理解、生物识别等方面,甚至可以为工业生产提供技术基础。

高通骁龙765还能用几年(高通芯助力手机拍摄再登楼)(14)

并且第五代AI Engine与操作系统以及各种软件工具进行适配后,即可实现硬件间的互通,AI Engine的智慧调度和强大的算力支持也将激励更多的软件开发商携手推出更多对应优化的app。

同时针对AI运算的云端处理,高通还为开发者提供了一整套完整的工具和框架,推动生态系统的发展,其中就包括给骁龙平台的智能手机提供降噪、夜拍、人脸识别、对象检测、视频分割、背景虚化等AI功能,推动手机的“智能生态”走向成熟。

写在最后

目前来说,AI算力的技术落点聚焦于影像体验。一方面是用户对于影像拍摄具备普遍需求,另一方面,影像对于连接AR等交互方式也具备战略性的意义。而最终AI能为终端用户打造丰富的体验,高通深耕AI的长远战略眼光以及持续投入研发的强大行业实力为诸多技术的实现提供了可能。

随着第五代AI Engine对于智能手机的影像提升,过去那些关于手机拍摄“偏科”的论断逐渐销声匿迹;相较于传感器尺寸的物理限制,AI对于影像的提升远没有尽头。未来AI Engine所带来的交互变革或许是未知的,但它已经为智能手机的影像指明了处理器端运算优化的进阶道路。

,

免责声明:本文仅代表文章作者的个人观点,与本站无关。其原创性、真实性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容文字的真实性、完整性和原创性本站不作任何保证或承诺,请读者仅作参考,并自行核实相关内容。文章投诉邮箱:anhduc.ph@yahoo.com

    分享
    投诉
    首页