手机制造商应该如何利用高通人工智能引擎这一智能“白板”
原标题:手机制造商应该如何利用高通人工智能引擎这一智能“白板”?
骁龙865的第五代AI Engine,满足了我对当下智能手机体验的所有想象。
2020年上半年,在5G业务的第二年,手机原始设备制造商正在上演一场独特的花式表演。
从三星S20系列的100倍变焦(1亿像素)到OPPO Find X2系列的屏幕升级(2K分辨率和120赫兹高刷新率)。从Black Shark 3 Pro的“三轴”(上下按钮、压力感应和声音控制)到红魔鬼5G的游戏变声功能(增加游戏乐趣),手机原始设备制造商正竭尽全力为2020年打造自己独特的个性标签,并向朋友们“展示”其强大的研发能力。
然而,很难想象,这一波“炫耀武力”的操作实际上已经为以高通为核心的手机SoC芯片制造商掀起了一波强大的宣传浪潮。无论是120赫兹高刷新率屏幕的硬件支持,还是拍摄视频的超级防抖功能的软件添加,手机SoC芯片背后的支持都是不可或缺的。手机SoC芯片似乎是一个不为人知的守护者,为手机原始设备制造商的各种创新尝试保驾护航。
▲OPPO找到X2专业版
然而,随着智能手机智能化进程的不断发展,手机摄影、游戏等细分市场的不断发展,以及消费者对体验需求的不断增加,人工智能技术在芯片中的地位逐年上升。高通公司和其他手机SoC芯片制造商正与手机原始设备制造商合作,为消费者建立一个逐步完善的人工智能生态系统,使手机真正变得“智能”。
计算摄影
目前,手机摄影能力已经成为消费者购买手机的一个重要参考因素。
手机摄影也可以称为计算摄影,即使用数字计算的摄影。与单反相机不同,单反相机依赖于CMOS和其他器件的性能取胜,计算摄影依赖于SoC芯片制造商的强大计算能力支持、手机OEM制造商的结构设计和算法优化以及CMOS制造商的硬件供应。它的核心是计算而不是摄影。
因此,随着计算摄影行业的生态继续发展,手机摄影的核心支持已经逐渐从CMOS芯片转移到手机SoC芯片,旗舰手机在2020年上半年带来的各种摄影功能点就是证明。手机原始设备制造商正依靠高通枭龙865等SoC芯片强大的图像处理能力和人工智能计算能力,为用户提供更好的摄影体验。
▲三星S20 Ultra:支持100米像素,8K视频拍摄,100倍变焦
据了解,高通枭龙865在计算摄影方面的关键升级点主要体现在Spectra 480互联网服务提供商和第五代高通人工智能引擎上,这正是影响计算摄影的两个关键因素。其中,OPPO Find X2的人工智能美女写真拍摄、视频超级防抖亲功能、Realme X50亲的智能平滑缩放、超级夜景3.0功能均源自第五代人工智能引擎的人工智能添加。
首先,人工智能很漂亮。作为手机摄影中人工智能应用的一个典型案例,包括OPPO在内的各大代工厂商的人工智能美容技术现在已经越来越完善,这完全归功于第五代人工智能引擎下的语义分割功能。简而言之,语义分割可以将整个图像或视频划分为语义区域,并对每个区域进行有针对性的优化,例如使眉毛变粗。
▲OPPO寻找X2专业爱美
语义分割就像后期图片编辑的大师,它允许拍摄和图片编辑的完美结合。这不仅可以实现肖像美化的功能,还能使我们在黑暗或大背光环境下拍摄清晰的照片。因此,Realme X50专业超级夜场景3.0模式也受益于此,以及原始设备制造商经常宣传“背光是清晰的”。
第二,防抖射击。使用OPPO Find X2系列进行视频拍摄时,只需打开相机页面左下角的自定义按钮,即可实现视频拍摄的超强防抖功能。这主要是因为第五代人工智能引擎可以执行更好的防抖操作,以进一步优化通过人工智能进行视频拍摄的稳定性。
▲OPPO找到X2专业视频超级防抖专业功能
第三,智能平滑缩放,即第五代人工智能引擎下的无缝缩放功能。过去,当我们用手机拍摄视频时,我们总能找到从超广角到长焦距的转换痕迹,这极大地影响了视频的美感。这一次,高通将与ArcSoft合作,彻底改变传统的变焦方式,使变焦像单反相机的机械变焦一样平滑,为Realme等厂商实现平滑变焦功能奠定基础。
此外,基于第五代人工智能引擎的图像分割功能,我们还可以体验一种全新的拍摄方法。例如,当我们拍摄风景照片时,图像分割可以将风景照片分成几个部分(如天空、森林和草原),然后我们可以用蓝天代替灰蒙蒙的天空,并进行个性化的DIY,使图片和视频的创作更加有趣。
▲小米10“神奇变天”
游戏体验
在这个时间碎片化的时代,手机游戏已经成为越来越多的人休闲的主要方式之一。高通XR产品的营销总监Leilani Deleon曾经说过,“游戏占智能手机使用场景的近一半,占应用商店消费的74%(每年约700亿美元)。这是一个非常惊人的数字,而且这个数字在未来还会继续上升。”
因此,如何通过软硬件设计来提升游戏体验成为当前手机OEM厂商研发设计的关键方向。除了原始设备制造商自身的研发能力,它更依赖于手机SoC芯片制造商和游戏软件提供商的支持。一个典型的例子是红魔鬼5G手机的智能中央处理器/图形处理器调度和它在游戏中的语音转换功能。
与聊天和浏览网页等轻量级应用不同,游戏是需要中央处理器和图形处理器协作的繁重应用。正因为如此,游戏体验的质量已经成为许多评估机构或媒体衡量手机性能的一个关键参考维度,其重要性甚至比运行兔子兔子等软件更为重要。
在智能手机的设计过程中,如何合理调用中央处理器和图形处理器资源尤为关键。如果长时间满负荷调用,由于严重的热问题,中央处理器和图形处理器会降低频率和帧数,导致游戏堵塞等现象的发生。这需要人工智能,即“润滑剂”。
基于第五代人工智能引擎对中央处理器和图形处理器的智能调度,红魔鬼5G游戏手机可以在游戏过程中始终保持高帧率和高流畅性。在《和平精英》游戏体验中,我们将红魔5G游戏手机屏幕设置为HDR高清画质,并限制帧数,测得游戏平均帧率为59.5fps(尚未适应更高的帧率),游戏帧数长时间没有明显波动,整个游戏过程平稳流畅,没有任何粘连。
众所周知,枭龙865上的Kryo 585处理器主要包括八个核心:最高主频为2.84千兆赫的A77核心,最高主频为2.4千兆赫的三个A77性能核心,最高主频为1.8千兆赫的四个A55效率核心。当红魔5G游戏手机运行游戏时,除了大核心外,处理器主要由七个核心来调动。 其中四枚A55高效内核将始终稳定工作,而A77性能内核将随着游戏场景的变化而波动,并与大内核配合,保持游戏平稳运行。
与此同时,肾上腺素650图形处理器在游戏中一直稳定运行。当游戏过程中遇到复杂的地图场景时,中央处理器和图形处理器内核会相应增加频率,使游戏平稳运行,这无疑是第五代人工智能引擎对中央处理器和图形处理器智能调度的直接体现。不仅如此,枭龙865的第五代人工智能引擎还可以实现性能和功耗之间的平衡。通过实现智能CPU/GPU调度,可以根据任务所需的性能自动找到合适的工作频率和内核,最大化相应的性能,节省功耗。
此外,红魔鬼5G游戏手机还支持游戏变声和触摸编舞游戏帧插入算法,两者都是在第五代人工智能引擎的支持下实现的。前者需要人工智能实时处理语音,而后者需要实时调整游戏的帧速率,使游戏保持在接近144赫兹(红魔5G屏幕刷新率)的高帧速率,这当然需要游戏软件提供商的支持。
AI让手机更智能
除了在手机摄影和游戏体验方面的巨大进步,第五代人工智能引擎还在智能翻译和语音到文本转换等应用场景中实现了视觉体验升级,使实时性成为可能。
翻译是我们日常生活中常见的场景。然而,“翻译”的传统含义大多需要背后的云支持。它有一个上传、识别和翻译的过程。它不是实时翻译,这无疑大大减少了翻译体验。因此,实现实时翻译可以说是实现翻译功能“智能化”的关键一步。如今,基于第五代人工智能引擎,智能手机终于可以实现同声传译等实时翻译,其中最具代表性的是vivo NEX 3S的最新翻译功能。
根据实际经验,vivo NEX 3S在翻译细节上仍有一些错误,但整体翻译的完整性和准确性仍令人满意。值得一提的是,整个过程是在终端端完成的,没有上传到云端。
▲vivo NEX 3S翻译器
对此,高通公司表示,“为了提高枭龙865的终端人工智能性能,我们采取了三管齐下的方法,包括优化的硬件配置、优秀的软件支持和开发工具。在人工智能翻译方面,我们与有道做了大量的合作,有道是我们翻译用例的重要合作伙伴。”
综上所述,作为高通枭龙865 SoC芯片的关键升级,第五代人工智能引擎无疑成为手机贴牌制造商突破创新的驱动力。第五代人工智能引擎不仅能为摄影爱好者提供与单反相当的摄影体验,还能为游戏爱好者的流畅游戏保驾护航。同时,特色游戏功能点也为游戏增添了更多乐趣。此外,实时智能翻译和实时语音到文本功能的引入,使得过去略显“慢”的智能手机变得更加智能。
事实上,将人工智能技术应用于智能手机的初衷是让它们真正“智能”,但这款看似简单的目标手机并不容易实现。手机“智能”需要整个手机产业链的合作,从SoC芯片的上游制造商(如高通)到原始设备制造商(如小米Ov)。从底层系统架构供应商(如谷歌)到应用级软件开发人员,它都是不可或缺的。今天,随着第五代人工智能引擎的出现,手机的“智能”产业生态正在不断成熟。
因此,第五代人工智能引擎更像是高通公司为下游制造商提供的智能“白板”。包括原始设备制造商在内的制造商的无穷创造力,以及这些制造商和开发商对当前市场需求的更准确的把握,要求他们画出什么样的图纸。
2020年刚刚开始,第五代人工智能引擎刚刚开始它的智能生活。至于未来,需要整个智能手机产业链的共同努力。
*本文版权归“PingWest品玩”所有,未经授权严禁转载。