手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技


手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
智东西(公众号:zhidxcom)
文 | 云鹏
智东西11月18日消息 , OPPO刚刚在未来科技大会技术分论坛上发布了支持全局10bit图片和视频的“全链路色彩管理系统” , 同时还推出了FDF全维人像视频技术系统 , 在视频的人像优化、画质增强方面做了主要升级 。
OPPO这套全链路色彩管理系统可以在拍摄、编码、存储、解码和显示多个环节实现全局10bit , OPPO也是目前安卓阵营中第一家推出该技术的厂商 。
FDF全维人像视频技术系统最突出的特点是利用对自研算法框架的优化和深度神经网络的加入提升了图像检测、识别等环节的准确性和效率 。
结尾时OPPO产品经理透露 , 明年的最新旗舰OPPO Find X3就将搭载今天发布的这套色彩管理系统 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
一、从拍照到显示 , 解决安卓手机色彩管理痛点OPPO产品经理BAI说 , 色彩一直是OPPO最重要的研究课题之一 , 这次浙江大学颜色与图像科学教授罗明首先介绍了颜色科学 。
他提到 , 颜色的真实和讨喜一直是让大家比较纠结的 。 罗明教授提到的这点也代表了目前手机行业拍照风格的两种路线:安卓阵营的讨喜优化 , iPhone的真实呈现 。
OPPO认为 , 色彩在手机中 , 涉及拍摄、编码、存储、解码和显示多个环节 , 为此OPPO推出了支持全局10bit图片和视频的“全链路色彩管理系统” 。
10bit相比传统的8bit , 色彩表现可以更加细腻 。
在拍摄方面 , OPPO将会支持10bit静态图片的拍摄 , 在传感器端 , OPPO推出了堆栈式DOL-HDR多重曝光技术 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
在编码和存储侧 , OPPO之前已经推出了HEIF格式 , 相比JPEG格式可以节省50%存储空间 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
不过在解码端 , 难度还是比较大 , OPPO对解码器进行了重构 , 研发出能够兼容10bit的图像解码方案 , 并配合推出新的内存结构 , 最终实现从编码、解码、编辑、渲染10bit 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
最后就是显示方面 , OPPO主要在硬件调教和色域映射方面下了功夫 。 OPPO坦言 , 这样的较准会给每台手机的流程增加26秒 , 但他们认为这是值得的 。
色域映射一直是手机显示的痛点之一 。 不管是DCI-P3还是sRGB , OPPO都会采用D65作为白点色温标准 。 可以在P3屏幕上更准确的显示sRGB图片 。 并且这个色彩管理系统后续还会向第三方进行开放 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
BAI特别提到 , 2021年 , OPPO最新的旗舰Find X3系列将首发搭载OPPO全链路色彩管理系统 。
另外她还带来了One More Thing , OPPO这次推出了色彩补偿系统2.0 , 提升色觉障碍人群使用手机的体验 , 据称样本量超过6000个 , 推出了765种补偿方案 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
值得一提的是 , 这套系统未来可能不仅仅为色觉障碍人群服务 , 每个人的色觉都是不同的 , 因此未来想象空间非常大 。
二、深度神经网络加入 , 提升人脸检测速度和准确性
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
OPPO影像产品经理OWEN在开场时说道 , 目前OPPO已经在影像领域建立了五支主要团队 , OPPO在影像领域申请的专利数量已经超过700件 , 其中发明专利占据80% 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
如今视频拍摄已经成为用户生活中必不可少的一部分 , 人像拍摄逐渐从照片向视频转化 。
OPPO此次推出了FDF全维人像视频技术系统 , 主要包括感知人像引擎和画质增强引擎 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
人现象感知引擎主要包括AI人脸关键点检测、AI超清人像、OFL肤质优化和人脸畸变矫正等技术 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图
通过深度神经网络 , OPPO优化了AI人脸检测的速度和准确性 , 据称准确率可以达到99.78% , 单帧检测耗时仅为25毫秒 。
手机直拍10bit照片!AI算法区分“痘”和“痣”,OPPO再发两项黑科技文章插图