为了争夺通往物联网世界的船票,孙正义花了320亿美元。他眼中下一个阿里巴巴,正是专注芯片设计的arm。扼守未来的咽喉,一切代价都相当超值。
日前,arm正式发布mali-c71图像信号处理器(isp),应对汽车图像处理所面临的挑战,包括在极端条件下对图像进行快速的处理和分析,符合严苛的汽车安全标准的设计要求。mali-c71也是arm mali camera系列的第一款产品。
无人驾驶汽车正在成为半导体先驱镜像追逐的热点,如高通推出骁龙车用处理器、三星电子与奥迪联姻、英伟达和梅赛德斯奔驰合作等。这一次arm来了,它将如何改变这一行业呢?
可怕的是,arm在移动领域似乎没有天敌。从cortex-a73到mali-g71,公版架构对于效率、性能的均衡足够出色。arm甚至带来一种幻觉,似乎自研cpu、gpu都不再必要。
“20年内,全球arm架构芯片的年出货量将达到1万亿颗,arm能够立刻收集所有实时数据”。arm还将触手伸向物联网(iot),这一次mali-c71瞄准了无人驾驶汽车。
图像信号处理器:isp
图像信号处理器(isp)的作用正在改变,随着每辆汽车内摄像头数量的增加以及传感器融合技术变得越来越智能,isp的功能——对原始像素进行处理,将其转换为高质量的图像以用于显示,进行编码并由计算机视觉算法进行进一步处理——正在被集中到adas soc之上。因此,soc需要能管理多个摄像头,满足对汽车可靠性和最高级别安全性的要求。这就要求有一种既具备内置功能安全特性,又能处理传输并行信号的计算机视觉处理方案。一直以来,在单一soc上实现这一处理方式是难以达成的。现在,这一切得以改变。
光线通过一层层镜组后,由感光元件cmos记录,接着传递到isp进行处理。isp的全称是image signal processor,即图像信号处理器。而驱动isp运算的那段代码,就是isp算法。
在手机摄影的应用中,isp负责测光、色温测量、对焦、对焦辅助、取景、色彩控制、边缘矫正等功能。集成于手机soc中的isp,其性能已普遍超过单反相机。
移动平台上的最强音
在arm之前,图像处理领域不乏体量大得多的半导体巨头,如高通、三星。它们将isp集成于soc之中,基本上替代了独立isp。
骁龙835带来双14位spectra 180 isp,最高可支持3200万像素的单摄像头,或者双1600万像素的摄像头。spectra 180 isp引入统一的双摄像头架构,包括彩色+黑白、广角+长焦,支持混合自动对焦,包括激光、对比、结构光和双相位对焦(2pd)。
exynos 8895同样搭载双isp芯片,一个负责高质量呈现、另一个用于控制功率,最高支持前后2800万像素摄像头,或是后置2800万+1600万像素的双摄组合。
初生牛犊,却一鸣惊人
mali-c71的技术源自于apical公司,arm在去年收购了这家影像和嵌入式计算机视觉供应商,成交价为3.5亿美元。mali-c71是mali camera系列的首款产品,支持多摄像头+多重曝光的特性。
这颗isp的理论吞吐性能达到12亿像素/秒,支持4颗摄像头实时采集数据,最高分辨率为4096×4096。因为汽车对于isp的要求远高于消费终端,据strategy analytics的预计,未来几年内高端汽车将装有至多12个摄像头。
汽车行驶时可能面对极限暗光、高反差场景等极端条件,需要mali-c71进行多重曝光处理,对采集的数据进行去噪与合成。
mali-c71具有24ev的超高动态范围(uwdr)。这一数值不仅碾压高端单反的15ev动态范围,在某些情况下提供的细节甚至超出了人眼所能辨识的范围。
全新应用领域:无人驾驶汽车
拥有如此强悍的表现,mali-c71需要更大的施展平台。arm希望将其用于先进驾驶辅助系统(adas),如先进后视镜、驾驶员疲劳检测以及行人保护系统,旨在推动汽车实现完全自动驾驶。
mali-c71满足包括iso26262、asil d、iec 61508和sil3在内的安全标准,并将提供针对这些汽车标准的安全包。此外,它有超过300个专用故障探测电路,能够提供低延滞和先进的错误检测。
实验室设备测量超低偏置电流的实用技巧
长岛区块链集团将面临退市的风险
曾为世界带来变革的苹果首款视网膜5K屏iMac被列入过时产品
电动汽车的养护问题该怎么解决
回顾美国半导体企业放缓招聘中国员工,担心知识产权外泄
物联网的突破口在无人驾驶?ARM借Mali-C71发力GPU
制作LVDS连接器时的注意事项
蔚来汽车将发布首款旗舰轿车
骁龙8cx第二代5G计算平台为用户提供极速的数千兆比特连接速度
知名可穿戴设备生产商将生产音圈电机呼吸机
三星s8上用的功能在iphone8上会有嘛?
ATT&CK覆盖度97.1%!360终端安全管理系统获赛可达认证
一文详解陶瓷电容器的类型及电介质
Silicon Labs新型网状网络模块简化安全IoT产品设计
兴业银行加速布局人工智能加金融服务
两种双管反激型DC/DC变换器的研究和比较
坤坤智能锁厂家带您全面了解全自动智能锁安装全过程
根据设备进行优化的人工智能
国内首个公租房采用5G网络+NB智能锁技术
激光切割机割不透原因