特斯拉|不要ISP,特斯拉自动驾驶的黑科技:摄像头晚上也能够看清楚

众所周知,在自动驾驶技术上,特斯拉坚持纯视觉方案,那就是只用摄像头,不要激光雷达,甚至连毫米波雷达都不要。
不过也因为如此,所以很多人吐槽特斯拉,称只使用摄像头的话,在光线不好的情况,完全看不清楚,容易引起误判。
特斯拉|不要ISP,特斯拉自动驾驶的黑科技:摄像头晚上也能够看清楚
文章插图
特斯拉|不要ISP,特斯拉自动驾驶的黑科技:摄像头晚上也能够看清楚
那么用摄像头真的在光线不好的情况下,就看不清楚么?只怕未必,近日马斯克透露了一项新技术,那就是使用摄像头时,要要干掉ISP。
ISP是什么,是图像信息处理器,其作用是将CMOS传感器获取到的信息,进行处理,变成人眼可以看懂的图像。
特斯拉|不要ISP,特斯拉自动驾驶的黑科技:摄像头晚上也能够看清楚
文章插图

而马斯克的技术是,CMOS传感器获取到的信息,不经过ISP,直接用原始信息进行处理。
在马斯克看来,不管ISP有多高级,在处理时总会有一部分原始光子在通过镜头到达CMOS、转换成可见光子的过程中会被丢失。
更具体的来讲,当光照强度很低或者很高的时候,我们人眼可能就看不见了但机器仍然可以测光子数量,因而仍然能有图像输出,因为CMOS不管明还是暗,都可以接收到很多光子,因而能看到黑暗状态下的事物。
特斯拉|不要ISP,特斯拉自动驾驶的黑科技:摄像头晚上也能够看清楚
文章插图

但如果引入ISP来处理时,因为人眼在晚上也看不清楚,所以ISP也将这些信息去年,假如不经过ISP,那么这些信息会保留下来,是可以被机器识别和计算的。
所以马斯克的计划是,接下来的技术上,要去掉ISP,这样晚上只用摄像头,不用激光雷达,也一样可以看清楚事情,从而同样实现自动驾驶功能。
当然,不用ISP,对算法的要求非常高,而这也是马斯克需要解决的问题,如果真的解决了这个问题,那么特斯拉的纯视觉自动驾驶,将真正迎来春天,毕竟成本低得太多了。