TOP:特斯拉为什么「抛弃」毫米波雷达

5月25日,特斯拉官方博客宣布,Autopilot正在过渡到基于摄像头的TeslaVision系统。

从2021年5月起,北美制造的Model3和ModelY将不再配备毫米波雷达,这些车型将通过特斯拉的摄像头视觉和深度神经网络来支撑Autopilot、FSD完全自动驾驶和某些主动安全功能。

单价约300人民币的前向雷达,超45万辆/年的销量规模,对于特斯拉的毫米波雷达供应商、顶级Tier1供应商大陆集团而言,中途丢掉一年过亿的订单实在不是个令人愉悦的消息。

去掉毫米波雷达

尽管特斯拉明确说明,计算机视觉和深度神经网络处理将实现主动安全/Autopilot/FSD的感知需求,但博客一出,各方立刻应声而动。

美国高速公路安全管理局官网修改了2021款Model3和ModelY的主动安全功能页面,包括前向防撞预警、防撞自动刹车、动态制动辅助均被明确提示,2021年4月27日后生产的车型不再配备。

报告:过去12个月加密货币劫持攻击激增399%:金色财经报道,网络犯罪分子越来越多地远程攻击服务器和设备,迫使他们在所有者不知情的情况下挖掘加密货币和比特币。Sonic Wall的一份报告发现,这种攻击被称为加密劫持,在过去12个月中全球范围内增加了399%。Sonic Wall EMEA副总裁Spencer Starkey表示,随着越来越多的组织拒绝支付赎金,这种做法已成为黑客的新作案手法。数据表明,由于执法活动的增加和严厉的制裁,网络犯罪分子也转向了这种更加离散的方法。针对企业、政府和全球公民的看似无休无止的数字攻击正在加剧,威胁范围也在不断扩大。[2023/7/26 15:59:55]

与此同时,《消费者报告》宣布暂停将2021款Model3列为「推荐」,美国高速公路安全保险协会取消了Model3曾经TopSafetyPick+的最高安全评级。

简单总结,特斯拉说我们移除了毫米波雷达,并通过摄像头实现了雷达之前的能力,但所有人都只听到了前半句。

以太坊Gas中位费用7日均值跌至23.97gwei,创近12个月新低:7月15日消息,据Glassnode数据显示,以太坊Gas中位费用7日均值跌至23.973gwei,创过去12个月新低,此前该指标曾在2021年7月25日跌至24.012gwei。[2022/7/15 2:14:56]

在我看来,各大民间和监管的安全机构如今对特斯拉都有些过敏,事实上,如果我们去梳理全球第一大视觉感知供应商Mobileye这些年的耕耘,正是一个将雷达逐步移出汽车主动安全范畴的发展史。

2007年,Mobileye主动安全技术首次进入汽车行业。2010年,融合雷达和摄像头的MobileyeAEB搭载在沃尔沃品牌量产。2011年,Mobileye纯视觉前向防撞预警在宝马、通用和欧宝品牌量产。2013年,Mobileye纯视觉车辆和行人自动紧急制动在宝马和日产品牌量产。2013年,Mobileye纯视觉自适应巡航控制在宝马品牌量产。2015年,Mobileye纯视觉全功能AEB进入多个OEM。

但事情正在愈演愈烈。特斯拉CEOElonMusk不得不通过Electrek辟谣:所有的主动安全功能都在新下线的车型中有效,NHTSA会在下周对新车型进行重新测试,当前移除雷达的车型是标配这些功能的。

去中心化计算平台DFINITY代币ICP空投将以12个月分发:去中心化计算平台DFINITY的互联网计算机宣布此前为用户空投的ICP代币将以12个月等额的方式分发,申领者需要通过AML/KYC程序,这些代币将转账至用户的CoinList账户,第一批ICP将会在创世解锁后收到。[2021/5/10 21:44:28]

但公众的质疑并没有被打消。比如,雷达擅长的对障碍物距离和速度的测量,恰恰是摄像头的传统弱势项目,特斯拉如何解决?

又或者,两种传感器怎么也比一种传感器好吧,即使摄像头可以做雷达所做的工作,两种传感器一起检测不好吗?

下面我们就来聊聊这些问题。

计算机视觉+RNN>雷达?

我们需要先了解雷达的技术原理,以及其在自动驾驶中所扮演的角色。

毫米波雷达,通过发射电磁波信号,接收目标反射信号来获得车身周围其他障碍物的相对速度、相对距离、角度、运动方向等。

通过对上述这些信息的处理,汽车得以配备一系列的主动安全功能,如自适应巡航控制、前向防撞预警、辅助变道、自动跟车甚至盲区检测等。

那么,特斯拉又如何通过摄像头获得上述信息的呢,比如,对前车距离的判断?

数据:Ordinals协议上线已铸造超20万枚NFT:2月28日消息,据Dune Analytics数据显示,自12月中旬比特币网络NFT协议Ordinals推出以来,用户已将超20万个NFT写入比特币区块链。

由于Ordinals的流行,比特币网络的费用在过去一个月里飙升,仅2023年2月15日的铭文费用就超过了170,500美元。比特币网络上的矿工已经支付了超过131万美元的费用。然而,自2月15日以来,每天支付给比特币矿工的费用稳步下降至2月20日的54,000美元,截至发布时目前仅略高于11,000美元。Ordinals创建者、前比特币核心贡献者Casey Rodarmor表示:“很明显,我们发布功能的速度还不够快,无法保持内存池满载;将在适当的时候纠正此事。”

金色财经此前报道,Yuga Labs将基于Ordinal协议在比特币区块链上推出NFT系列TwelveFold。(Decrypt)[2023/2/28 12:33:15]

2020年8月21日,Elon在Twitter上表示,通过纯视觉进行准确的距离计算是基础,其他传感器可以提供帮助,但那不是基础。他所回复的博文,介绍的正是特斯拉一项名为《EstimatingobjectPropertiesUsingImageData》的专利。

过去12个月稳定币链上活动增加800%:市场情报公司TokenAnalyst的数据显示,过去12个月中稳定币的链上活动增加了800%。考虑到稳定币利基市场的整体增长,这种增长不足为奇。目前所有稳定币的总市值在BTC和ETH之后排名第三。 过去一年中,2900亿美元的稳定币在链上转移,仅在3月就转移了509亿美元的价值,而在2019年4月仅为62亿美元。(CoinTelegraph)[2020/4/23]

4月13日,特斯拉Model3车主、Facebook分布式AI和机器学习软件工程师TristanRice「黑」进了Autopilot的固件,揭开了特斯拉通过机器学习取代雷达的技术细节。

根据Tristan的说法,从新固件的二进制文件中可以看出,Autopilot的深度神经网络增加了许多新的输出,除了现有的xyz输出外,还包括许多传统雷达输出的数据,例如距离、速度和加速度等等。

深度神经网络可以从一张静态的图片中读取速度和加速度吗?当然不行。

特斯拉训练了一个高度精确的RNN,通过15帧照片/秒的、基于时间序列的视频来预测障碍物的速度和加速度。

RNN又是什么?RNN的关键词是预测。RecurrentNeuralNetwork,循环神经网络,顾名思义,基于环状神经网络传递和处理信息,通过「内部记忆」来处理任意时序的输入序列,以准确预测接下来即将发生的事情。

英伟达的AI博客曾举过一个经典的例子:假设餐厅供应是菜品规律是不变的,周一汉堡、周二炸玉米饼、周三披萨、周四寿司、周五意面。

对于RNN而言,输入寿司并寻求「周五吃什么」的答案,Ta将会输出预测结果:意面。因为RNN已经知道这是一个顺序,而周四的菜品刚刚完成,因此接下来是周五的菜品是——意面。

对于Autopilot的RNN来说,给到当前汽车周围的行人、车辆和其他障碍物的移动路径,RNN就可以预测接下来的移动轨迹,包括位置、速度和加速度。

事实上,在5月25日正式官宣移除雷达的前几个月,特斯拉一直在将其RNN与全球车队中的雷达并行运行,通过雷达输出的正确数据和RNN输出结果校对,来提升RNN预测的准确性。

多说一句,对于中国交通工况下非常经典的加塞儿处理,特斯拉也通过类似的路线更替实现了更好的表现。

特斯拉AI高级总监AndrejKarpathy在CVPR2021的一次线上演讲中透露,对于前车加塞儿识别,特斯拉已经通过深度神经网络完成对传统规则算法的替换。

具体来说,Autopilot此前检测加塞儿基于一个写死的规则:首先要识别车道线,同时识别和跟踪前方的车辆,直到检测到前车速度出现符合加塞儿的阈值水平速度,才执行加塞儿指令。

而如今Autopilot的加塞儿识别移除了这些规则,完全通过RNN基于标注的海量数据做前车的行为预测,如果RNN预测前车将加塞儿,就执行加塞儿指令。

这就是过去几个月来特斯拉对加塞儿识别取得大幅改进的技术原理。

前文提到的特斯拉专利里详细解释了特斯拉训练RNN的运作形式。

特斯拉会将雷达和激光雷达输出的正确数据与RNN识别的对象相关联,以准确估计对象属性,例如对象距离。

在这个过程中,特斯拉开发了工具使得辅助数据与视觉数据的采集和关联实现了自动化,无需人工标注。此外,关联后可以自动生成训练数据用以训练RNN,从而实现高度精确地预测对象属性。

由于特斯拉在全球的车队规模已经超过100万辆,特斯拉得以在海量场景数据的训练下迅速改善其RNN的性能。

而RNN一旦将预测的准确性提升到和雷达输出结果的同等水平,就会形成相对毫米波雷达的巨大优势。

这是因为特斯拉Autopilot只搭载了前向雷达,在城市工况下车辆各个方位乱窜的行人、骑自行车和摩托车的人很难全部准确预测。即使是正前方的、在其45°探测范围内的障碍物,只要两个障碍物同距离、同速度,Autopilot此前搭载的雷达就无法分辨。

而Autopilot搭载的8颗摄像头实现了车身周围的360度覆盖,其编织的全车BEV鸟瞰神经网络可以无缝地预测全车任何一个方位的多个障碍物接下来的移动轨迹。

那特斯拉为什么不保留雷达,利用雷达和摄像头两种传感器进行双重校验呢?

ElonMusk详细解释过他对雷达和摄像头的看法:

在雷达波长下,现实世界看起来像一个奇怪的幽灵世界。除了金属,几乎所有东西都是半透明的。当雷达和视觉感知不一致时,你采信哪一个?视觉具有更高的精度,因此投入两倍的精力改善视觉比押注两种传感器的融合更明智。传感器的本质是比特流。摄像头比特/秒的信息量要比雷达和激光雷达高几个数量级。雷达必须有意义地增加比特流的信号/噪声,以使其值得集成。随着视觉处理能力的提高,摄像头的性能将会远远甩开当下的雷达。

这番表态看起来十分微妙。我们此前的文章《特斯拉:我为激光雷达代言》一文中曾经写到过ElonMusk对毫米波雷达的态度。在上面这番言论中,他同样没有「宣判」雷达在特斯拉的死刑。

「雷达必须有意义地增加比特流的信号/噪声,以使其值得集成。」即将到来的特斯拉Autopilot会搭载成像雷达吗?

郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。

链链资讯

火币APP比特币:一文了解什么是奇亚Chia挖矿!

前言 继显卡断货后,近期媒体不断报道硬盘断货、硬盘暴涨的相关新闻。主要原因在于硬盘挖矿。4月份以来,继狗狗币之后,奇亚Chia紧接着成为了最近币圈的头部话题,火遍整个矿圈!Chia成立于2017.

[0:15ms0-3:651ms