文章编号:1282时间:2024-05-28人气:
往年,除了固态电池,智能驾驶畛域的端到端,也在被狂炒。
特斯拉的示范效应真的很凶猛,随着TeslaV12在北美大范围推送以及表现,端到端也成为了智能驾驶行业里大家最为关注的技术方向。
当然,国际最大的故障妇孺皆知,就是营销前置。就像固态电池,还没整出什么大规模量产,先在流传过去吹一波。而且,到了仿佛不提端到端都不好心思出门的水平。
那么,什么才是端到端?这些真虚实假的端到端,究竟有多少干货呢?
端到端的黑盒子
先来了解一下,所谓端到端智能驾驶,打个不失当的比如,就像做菜,你在黑盒子的这边输入食材,而后另一边一步到位输入做好的菜。
由于,如今干流的智能驾驶方案,都是模块化的。就是咱们熟知的感知、决策和口头三大模块。而端到端就是把三个间接变成一个,从传感器数据输入开局,两边只需一步,到控制信号输入(马斯克所说的PhotontoControl),成功完整闭环。
这个操作也树立了目前智能驾驶畛域的最高水温和标杆,所谓无招胜有招、一招制敌。然而,这也反映了一个难堪的行业理想,就是特斯拉在智能驾驶畛域还是一骑绝尘的。
而当下广泛运行的三大模块的好处是技术较为成熟,开动员来确实定性更强。然而,这种技术架构下,智能驾驶车辆在极端案例(CornerCase)方面,依然依赖工程师编写少量代码去制订行驶规定。
单靠数据训练进去的各个模块,很难解决没碰到过的状况,也就是须要不时用规定去填俗称为坑的各种CornerCase。同时,为了迅速扩展量产车上智能驾驶系统笼罩范围,车企不得不招募更多的软件工程师,比如,华为智能驾驶的规控团队就招募了上千名工程师。
而智能驾驶方案中的模块化,也是不时退化而来。从2017年前的9个模快(仅感知环节就有检测、指标跟踪和融合数据3个模块),到多传感器融合后,如今的感知、决策(或许叫预测)和口头(或许叫布局控制)三大模块。
从融合的角度来说,当三大模块融合为一个黑盒子来输入口头结果的时刻,实践上要求是更高的,不然特斯拉为什么这么多年才干推出端到端?对吧。面前是基于弱小的DOJO超算中心,以及更多的GPU。
而且,这种彻底的端到端黑盒子,技术上很难启动Debug(调试)和迭代提升,同时由于传感器输入信号如图像、点云等是高纬度的,控制信号输入如方向盘转角和油门刹车踏板信号等是相对低维的,在端到端训练中十分容易过拟合,造成实车测试齐全无法经常使用。
没有金刚钻,不揽瓷器活。国际最近一些企业则宣称自己是端到端感知,或许端到端决策,只是各种细枝末节的端到端,这只能算作是纯数据驱动的感知和纯数据驱动的决策布局阶段。
换句话说,做得好点的还只是前两个模块的融合,基本做不到输入控制(口头)的结果。如今大肆宣传,不过是蹭热点、炒个概念。
端到端为什么会热起来?还有个要素,是去年商汤绝影的UniAD(UnifiedAutonomousDriving)取得了CVPR2023BestPaper最佳论文奖。虽说不算是众望所归,但也给智能驾驶行业注入了一剂强心剂。
但国际对UniAD褒贬不一,这种褒贬不一不只仅体如今感知、预测、规控各个团队的独立视角上,还体如今智能驾驶畛域学术界和企业界的鸿沟(Gap)。毕竟,企业面对的CornerCase也远多于学术界。
再说,故事讲得再流利,毕竟须要量产落地。由于,预研的技术是要落到实车上才干最终表现价值。
但UniAD的论文外面没有提供实车数据(不蕴含Nuscenes)的数据和Demo,只要开环评测,没有闭环评测。
只管北京车展上商汤绝影面向量产的UniAD成功上车展示首秀,但实践成果必需是须要验证的。
端到端的难点
端到端智能驾驶的前景,必需是黑暗的。然而,路线必需是迂回的。
比如,端到端方案中的一体化训练就须要海量数据,因此,难点之一就在于数据的搜集和解决。取得海量的行车数据,也是训练端到端智能驾驶模型的入场券。
马斯克去年在财报会上谈到过数据对智能驾驶模型的关键性,训练了100万个视频Case,勉强够用;200万个,稍好一些;300万个,就会感到Wow;到1000万个,就变得难以置信了。
而数据的搜集须要少量的期间和渠道,数据类型除了驾驶数据外还包括各种不同的路线、天气和交通状况等场景数据,特意是,实践驾驶中周围方位的消息搜集难以保障。
其次,数据解决时还须要设计数据提取维度、从海量的视频片段中提取有效特色、统计数据散布等,以允许大规模的数据训练。这点须要巨额的投入和老本。
由于,并不是一切的行车数据都可以用来训练端到端模型。有智能驾驶工程师就发现,原本积攒的路测数据只要2%可用。想让端到端模型具有通用才干,必需用不同场景中的高质量数据训练模型。
还有,《马斯克传》中马斯克也亲口解释过,特斯拉全球200万台车每天约可搜集1600亿帧的驾驶视频用于模型训练。然而,治理如此宏大的数据并非易事,由于绝大少数视频都是无用的。
真正贵重的是那些车流量意外大、或是有泛滥行人做出各式各样的行为、路况极端复杂的画面,然而这个占比甚至连1%都不到。而为了提取这1%画面,须要庞小孩儿力、算力、贮存甚至是电力等巨额老本。
就拿最关键的算力来说,门槛也极高。马斯克曾在往年三月初在X.com上示意目前FSD的最大限度要素是算力,而在失掉缓解后,4月初马斯克又示意,往年Tesla在算力方面的总投入将超越100亿美元。
此外,2024年Q1财报会议上,Tesla泄漏如今曾经领有35000块H100的计算资源,而2024年底这一数字将到达85000块。这象征着,要到达跟目前FSDV12雷同的水平,大略率35000块H100和数十亿美金的基础设备资本开支是必要前提。再往下,门槛还在进一步拔高。
数据失掉老本高昂,再加上数据隐衷和安保疑问,数据标注和荡涤艰巨,以及法律和监管限度等等,都限度着数据的失掉。那么,国际的车企,又有哪个能承当如此高昂的这些老本呢?
除了数据搜集的应战外,数据对齐也是智能驾驶技术中面临的一大难题。
智能驾驶畛域,面临着海量未标注的异构行为大数据。这些数据来自于不同的传感器、设备和环境,具有不同的格局和特色。要能用于智能驾驶的训练和运行,就须要启动准确的数据对齐。
所以,拨开营销的迷雾,咱们就知道,端到端的假相是什么。
简洁不便捷,端到端不是说哪个单项做好就行,而是须要系对抗切模块都到达一个较高的功能水平,才干在端到端的决策布局控制输入中达成较好的成果,这种端到端系统数据门槛,是远高于感知、决策、口头单个模块的数据需求的。
国际的企业,还是须要踏虚浮实把脚下的路走好才是。
岑参《白雪歌送武判官归京》中“忽如一夜春风来,千树万树梨花开”是传颂千古的咏雪名句;《咏雪》中“ (未若柳絮因风起)”则更是传神地写出了雪花的轻盈美丽。
这首诗是岑参送一姓武的哥们回京城时候写的,那个时代交通不发达,一旦分开就不知道猴年马月能再见一回,所以古代写离情别绪的牛掰诗词特多,类似还有赠汪伦、渭城曲什么的。 这里岑大哥送内姓武的哥们时候就有感慨了于是留下了这么两句千古名句。 意思就是他送内哥们时候忽然下雪了,在秋天已经落光的枝头落上了积雪仿佛春天开的梨花开放了一样。 充分表达了作者虽然要跟哥们分别了但情谊还在于是他就很欣慰。 这诗里还有句牛掰的就是瀚海阑干百丈冰,愁云惨淡万里凝。
这两句是说,一夜大雪,树上挂满雪花,天明一看,好像变成了另一个世界,犹如昨天吹来了春风,而使千树万树梨花怒放。 塞外苦寒,北风一吹,大雪纷飞,诗人以“春风”使“梨花”盛开,比拟北风使雪花飞舞,极为新颖贴切。 “忽如”二字妙甚,传出诗人惊喜好奇的神情。 “千树”句的壮美意境,颇富浪漫色彩。 盛开的雪白梨花,花团锦簇,压枝欲低,与雪压冬林的景象极为神似。 诗人“妙手回春”,以雪喻花,匠心独运,将内地春景比塞外冬景,构思奇巧,意境奇绝,是千古传诵的咏雪名句。
内容声明:
1、本站收录的内容来源于大数据收集,版权归原网站所有!
2、本站收录的内容若侵害到您的利益,请联系我们进行删除处理!
3、本站不接受违法信息,如您发现违法内容,请联系我们进行举报处理!
4、本文地址:https://link.52hwl.com/article/adfd2208b7e5aa5bf800.html,复制请保留版权链接!
今次中央政治局会议决定全面放开三孩生育,是继2013年实施单独二孩与2015年全面二孩之后,中国生育政策的又一重大调整。 其实,自从
2022-08-06 10:37:51
中国嫦娥六号任务备受全球关注,外媒space最近再次报道,称其计划于6月初在月球背面着陆,这次任务的重要性不言而喻,一旦成功,将为中国航天写下辉煌篇章,同时也创造世界航天史上的新纪录,接下来,我们就详细分析一下这次任务的准备和执行,自5月3日发射以来,嫦娥六号仅用5天便已进入月球的环月轨道,在进入轨道后,并非立即进行轨道转移,而是首先...。
2024-05-29 09:43:49
华为Pura70系列的发布再次掀起了手机市场的热潮,作为华为P系列的新生代,Pura70系列在上市之前就备受关注,其独特的设计理念引发了广泛讨论,华为一直致力于手机外观设计,而Pura70Pro也不例外,采用了全新的风向标镜头模组设计,将摄像头巧妙地融入机身一侧,体现出别致的外观风格,拿在手中,华为Pura70Pro的高级质感给我留下...。
2024-05-28 21:41:02
据BNO报道,著名表情包doge的原型柴犬卡波苏,Kabosu,去世,18岁的柴犬卡波苏此前被诊断出患有白血病和肝病,该柴犬是网络流行表情包Doge的原型,根据主人佐藤在博客上分享的近况更新,著名表情包doge的原型柴犬卡Kabosu于24日上午去世,Kabosu的主人发文表示,致长期喜爱Kabosu的人们,真的非常感谢,我认为Kab...。
2024-05-28 16:22:44
网络输入法,作为业界领先的智能输入解决方案,凭借其强大的词库、智能化的组词功能和用户友好的界面设计,赢得了亿万用户的青睐,无论是手机还是电脑,网络输入法都能提供快速、准确的输入体验,现在您可以轻松下载最新版本的网络输入法,享受极致的输入新体验,如今家家户户都有网络,有网络就会涉及到路由器,并且路由器安全也是一大重点,今天要为大家介绍的...。
2024-03-29 17:04:52
近日,据胡依婷编辑的报道,深圳夸夸菁领科技有限公司,以下简称夸夸菁领,最近宣布获得了一笔千万级的天使轮融资,投资方为个人,这笔新资金将被用于产品研发和市场推广,夸夸菁领成立于2023年,主要为企业和政府客户提供基于AI大模型的新型用工模式,该公司的主要产品是虚拟数字人员智能员工,这些员工目前可以担任招聘助理、数智博士助理、政务助理和法...。
2024-03-15 00:52:02
凌晨三点,小姑子忘记屏蔽我一条朋友圈,结束了我十年婚姻凌晨三点,当整个世界都沉浸在梦乡之中时,我却在黑暗中挣扎,那一刻,我仿佛听到了心碎的声音,那是十年婚姻的终结,而这一切,都源于小姑子忘记屏蔽我的一条朋友圈,十年前,我和丈夫相识于一次聚会,那时的他,阳光帅气,才华横溢,让我一见钟情,经过一段时间的相处,我们决定牵手走进婚姻的殿堂,婚...。
2024-02-13 16:04:46
快科技2月6日消息,RTX40系列独享的DLSS3和帧生成技术效果显著,RTX20,30系列老卡玩家现在也有机会体验了,无所不能的MOD大神们已经能够让RTX20,30系列显卡开启DLSS3,神奇的是居然利用了AMD的技术,改造的关键步骤之一是替换两个带有AMDFSR3代码的DLL动态链接库文件,还需要修改Windows注册表,让游戏...。
2024-02-13 12:24:37
Python入门项目实战,实现基本的日历应用Python入门项目实战是学习Python编程语言的一个重要部分,在这个项目中,学员将有机会实现一个基本的日历应用程序,本篇分析将详细介绍如何通过Python编写代码来实现这个应用,让我们看看日历应用的基本功能,一个日历应用允许用户查看、创建、编辑和删除事件,所以,我们需要考虑以下几个方面,...。
2024-02-13 10:03:55
外围提要1.此次席卷全国的雨雪天气,只管还要继续几天,但曾经到了可以复盘的时刻,此前欧洲EC和美国GFS的预告细节出现了较大对立,而中国中央气候台的预测则介于二者之间,理想证实,中央气候台的预测较为准确,2.这一次性降雪,河南的预告图给人留下了深入印象,但理想上,河南的降雪并不极其,气候台的预告也是准确的,只不过是示用意经常使用彩色,...。
2024-02-07 06:09:02