2020年,是5G飞速发展的一年。在中国5G商用一周年之际,5G基站已经超过60万座,5G终端连接数超过了1.5亿。但飞速发展的背后也有不少质疑声,质疑者认为5G网络成本高却缺乏杀手级应用场景,是否5G真的如此“鸡肋”呢?
先不说5G凭借高速率、低时延、高连接数和高可靠性等优点,对工业4.0以及智能汽车、远程医疗的跨越性赋能,单谈消费者市场,5G也正在推进视频行业的巨大进化——从录制到播放,8K内容已经开始成为了时下的热门发展方向。
纵观2020年发布的多款安卓旗舰手机,8K视频录制、4K HDR视频录制、夜景超高清视频录制等功能纷纷成为主打卖点。另一方面,通过5G和WiFi 6极速网络,手机拍摄的超高清视频也可以轻松传输到电脑上进行剪辑,又或者直接传输到8K电视上进行播放。在手机性能和网速、播放设备的增加等多重因素下,相信8K内容将获得很快的发展速度。
而实现5G+8K的重要基础,就是这些旗舰手机中采用的高通骁龙865 SoC。它不仅有超强的运算性能,X55 5G极速基带,更重要的是,它内藏Spectra 480 ISP和第五代Qualcomm人工智能引擎AI Engine,赋能智能手机极其强大的计算摄影能力。
我们可以看到像小米10至尊纪念版、vivo X50 Pro+等旗舰手机纷纷支持了8K视频录制,正是得益于这颗SoC。高通骁龙865 SoC是智能手机平台上唯一支持8K视频录制的芯片方案。
Spectra 480 ISP有两个非常出色的特性,第一,它拥有每秒处理20亿像素的能力,从而能在手机平台首次实现拍摄2亿像素的照片,以及8K 3300万像素级别的视频录制。此外,像4K HDR视频录制、原生720P 960FPS慢动作视频录制等功能也能轻松解决。
第二,它还能提供优质的拍摄质量。它增添了全新的噪点过滤内核,能够减少弱光拍摄环境下常见的噪点,夜景模式下拍摄能力更出众;时域滤波内核能在视频拍摄时全局处理像素,还可以实现局部运动补偿,让视频对焦更准确,画面更顺畅。此外,Spectra 480 ISP针对降噪的像素处理能力相比前代提升了40%。这意味着用户拍摄的所有视频能够流畅播放,并且图像噪点相比前代减少了很多。Spectra 480 ISP在降噪方面的表现十分优异。
为何Spectra 480 ISP的性能会如此强大?简单了解一下它的内核协作,它由三部分组成:HiSpeed Capture模块能够高速处理数据流;EVA视频分析引擎能够支持拍摄照片和视频时的深度感测和物体识别;HEIF能够压缩、编码和存储用户的图片和影像。上述三个模块共同组成了ISP,也是赋能智能手机如此强大影像性能的关键因素。
除了ISP硬件本身外,AI人工智能也在手机摄影中占据了越来越重要的地位。骁龙865 SoC配备第五代AI Engine,其算力可以达到15TOPS,也就是每秒15万亿次运算的水平,相比上一代提升了2倍多。它由Kryo 585 CPU、Adreno650 GPU、新一代Hexagon 698处理器、Spectra480 ISP、Qualcomm传感器中枢(SensingHub)、安全处理单元、调制解调器,以及Quick Charge等模块组成,在它们的共同作用下,第五代Qualcomm AI Engine的AI能力才能实现飞跃。
第五代Qualcomm AI Engine可以为手机拍摄带来立竿见影的提升。拍摄完照片后,它会对照片进行多种后期处理,如分割、降噪、检测、HDR、放大缩小等等,甚至实现一键魔法变天、AI修复老旧照片等神奇功能。
与照片类似,拍摄视频时手机也在运行很多算法,在算力支持范围内,视频会使用包括分割、简单的降噪、增强、检测、分类等算法,这往往需要10TOPS级别的算力。例如8K视频的降噪、HDR视频的像素级处理,960FPS慢动作视频的流畅优化,多摄像头变焦时的平滑接力等等。
得益于Spectra 480 ISP和第五代AI Engine的共同努力,骁龙865让8K视频录制为代表的各种超高清内容制作不再成为难题。此外,配合内置的X55 5G基带以及Wi-Fi 6支持,超高清内容也能得到快速的分享,串联起整个5G+8K视频产业的高速发展,引导整个手机行业发展的影像进化。