骁龙888参数性能技术细节 功能和技术创新全解析( 二 )


什么是融合 AI 加速架构呢?在之前骁龙 865 的 Hexagon 处理器中 , 有标量、张量和向量加速器 , 但他们是分开的 , 而在骁龙 888 的 Hexagon 780 处理器中 , 这些加速器之间的物理距离几乎消失了 。
不仅如此 , 高通还在这三个不同加速器之间添加了很大的共享内存 , 从而让他们更快、更高效地共享和移动数据 。 高通称 , 专用共享内存的加入让 Hexagon 780 在单一应用中的性能提升 16 倍 , 在某些应用中 , 数据交互时效最多可提高上千倍 。
此外这些加速器自身的性能也得到了提升 , 标量加速器的性能提升了 50% , 而张量加速器的处理速度是前代的 2 倍 , 更重要的是 , 在性能上涨的同时 , 它们还提升了每瓦特性能 , 能效相比前代提升 3 倍之多 。
五、Spectra 580 CV-ISP:首个支持三 ISP 的图像信息处理器
今年的骁龙 888 移动平台中 , Spectra 580 CV-ISP 有着重要的功能升级 。 首先 , Spectra 580 是高通首个支持三 ISP 的图像信息处理器 , 可以让手机上的多摄像头进行三重并发和三重并行处理 , 从而把专业图像质量提升到一个全新的水平 。
三 ISP 的设计可以衍生很多应用 , 例如可以支持用户在智能手机上利用 3 个不同的摄像头同时拍摄视频 , 然后生成 3 支视频 , 每支视频都可以达到 4K HDR 品质 。
或者可以在同一时间拍摄 3 张照片 , 每张都可以是 2800 万像素 30fps 的零快门延时模式 。
同时 , 三 ISP 也可以令多摄手机在不同焦段之间的切换更加平滑 , 当用户使用广角拍摄时 , 其他摄像头会在后台处于随时待命的状态 , 比过去冷启动的切换体验要顺畅很多 。
除了三 ISP , Spectra 580 在速度、图像质量和计算机视觉方面也有提升 , 其处理速度比上一代快 35% , 可以每秒处理 27 亿像素 。
这样的像素处理能力 , 可以让智能手机以 6400 万像素和 2500 万像素的镜头组合同时以 30fps 帧率拍摄视频 , 而且可以在 1 秒钟内捕获 120 帧每帧都是 1200 万像素的画面 。
Spectra 580 ISP 还支持高通全新的低光架构 , 速度结合骁龙 888 平台的新一代 AI 引擎 , 可以大幅提升低光环境下照片的拍摄能力 , 只要 0.1Lux 的照度 , 拍摄出细节惊人的照片 。
除了这些 , 全新 Spectra 580 ISP 还支持单帧逐行 HDR 传感器的传感器技术 。 单帧逐行 HDR 图像传感器技术也得益于 Spectra 580 的三 ISP 设计 , 可以输出每帧独立的长、中、短三次曝光 , 且所有图像都有明亮或黑暗场景中不同部分的细节 , 这和现在手机 HDR 的每帧单次曝光的多帧合成有很大区别 。
基于这个技术 , 骁龙 888 可以在视频和照片拍摄中应用多重曝光计算 HDR , 这样不仅可以拍摄 8-bit 的 JPEG 。 更能利用 HEIF 格式来拍摄 10-bit 色深的照片 。
总之 , Spectra 580 的三 ISP 可以在所有拍摄模式下支持计算 HDR , 而三重并行处理使每一次曝光都能在一帧时间内同时拍摄并合成 。 这些技术将令智能手机的影像效果更加精彩动人 , 它有比以往更大的动态范围 , 更多的细节和更少的伪影 。
此外 , Spectra 580 还支持拍摄 4K/120fps 的普通视频与超高清慢动作视频 , 并结合 120HZ 的屏幕以 120fps 的帧率播放 。
Spectra 580 还支持高通第 10 代 3A 算法(自动对焦、自动曝光和自动白平衡) , 这是首次由 AI 赋能的 3A 算法 。
具体来说 , Spectra 580 ISP 采用全新的基于显著性特征分析的自动对焦和自动曝光引擎 , 参考了虚拟现实(VR)中的眼部追踪技术 , 训练显著性特征分析自动对焦和自动曝光神经网络 。 从而实现更快、更准确的自动对焦 。
六、第六代 AI Engine 人工智能引擎:算力达26TOPS
随着 AI 市场的持续火热 , 骁龙旗舰移动平台中搭载的人工智能引擎也是备受关注的部分 。 今年骁龙 888 搭载了第六代 AI 人工智能引擎 。
第六代 AI Engine 的一个最大改进 , 就是我们前文说到的 , Hexagon 处理器重新设计 , 采用了融合 AI 加速器的架构 。 与此同时 , 第六代 AI 引擎的算力达到了 26 TOPS , 相比上一代的 15 TOPS 有巨大的提升 。
在第六代 AI Engine 架构中 , 还整合了高通第二代传感器中枢 。 今年的第二代传感器中枢中 , 高通增加了一颗专用的、始终开启的、低功耗的 AI 处理器 , 令传感器中枢 AI 性能提升达 5 倍 。 这种额外的 AI 处理能力使 Hexagon 处理器可以将高达 80% 的工作负载分担给传感器中枢 , 从而做到更加省电 。 高通传感器中枢进行所有处理所需的功耗仅仅不到 1 毫安 。
高通还与谷歌就其最新的 TensorFlow Micro 框架开展合作 , 确保开发者能够轻松访问高通传感器中枢 。