马斯克如何让特斯拉实现自动驾驶
2024-03-17 【 字体:大 中 小 】
专题:埃隆·马斯克与他的商业世界
本文节选自《埃隆·马斯克传》,9月9日由作者沃尔特·艾萨克森发表在CNBC网站上。这段文字记录了特斯拉人工智能自动驾驶的突破时刻。
《埃隆·马斯克传》2023年9月12日全球同步出版,唯一简体中文版由中信出版集团出版。本书由‘乔布斯传’执笔人、美国当代知名传记作家 Walter Isaacson 撰写,埃隆·马斯克亲自参与并公开推荐。
两年来,作者沃尔特艾萨克森形影不离地跟访马斯克,参加他大大小小的会议,与他一起走访工厂,深度采访了他本人,以及他的家人、朋友、同事和对手。
引言:
今年8月下旬的一个星期五,在位于帕洛阿尔托的特斯拉总部,埃隆·马斯克坐进了自己的Model S。他在导航屏幕上随意选择了一个地点,然后让汽车利用全自动驾驶技术(FSD)自动驾驶。在45分钟的时间里,他一边听着莫扎特,一边直播自己的行程,包括路过马克·扎克伯格的家。他笑着说:“也许我应该敲敲门,礼貌地询问一下他是否愿意进行徒手搏斗”,然后让车子继续行驶。
马斯克以前曾数百次使用过FSD,但这次的驾驶却有着深刻的不同,这不仅仅是因为它更平稳更可靠。他所使用的新版本FSD V12,是基于一个全新的概念,他认为这个概念不仅将彻底改变自动驾驶汽车,还将是通用人工智能的一次飞跃,可以在真实世界的物理环境中运行。
这个新系统并不像以前所有版本的自动驾驶软件那样基于数十万行代码实现,而是通过处理数十亿帧人类如何驾驶的视频,来自学如何驾驶,就像新的大型语言模型(LLM)聊天机器人通过处理数十亿人类文本来训练自己生成回答一样。
令人惊奇的是,马斯克让特斯拉启用这个全新的方法,才八个月。
向人类学习
达瓦尔·史洛夫(来自孟买的年轻工程师, 2014 年从卡内基·梅隆大学毕业后加入了特斯拉的自动驾驶团队)对马斯克说:“它就像 ChatGPT,不过是用在车上的。”他将自己在特斯拉做的项目与 OpenAI 刚刚发布的人工智能聊天机器人进行比较。OpenAI 是马斯克在 2015 年与山姆·阿尔特曼共同创办的实验室。近 10 年来,马斯克一直在研究各种形式的人工智能,包括自动驾驶车辆、Optimus 和 Neuralink 脑机接口。史洛夫的项目涉及最新的机器学习前沿领域:设计一种能从人类行为中学习的自动驾驶车辆系统。史洛夫说:“我们处理了大量有关真人在复杂驾驶环境中如何行动的数据,然后我们训练计算机的神经网络来模仿这种行为。”
马斯克要求会见史洛夫,因为马斯克正在考虑说服他离开特斯拉的自动驾驶团队,去推特工作。他曾偶尔与詹姆斯、安德鲁和罗斯并肩作战,充当第四名“火枪手”。史洛夫希望说服马斯克相信他正在研究的项目至关重要,他不想去推特工作。在被称为“神经网络路径规划”的特斯拉自动驾驶软件中,他研究的是“向人类学习”的组成部分。
他们安排会面的这一天发生了太多事情,如果这次会面也是当天“剧本”中已经写好的一部分,那未免显得太刻意了。2022 年 12 月 2 日,周五,也就是马特·泰比发布第一批“推特文件”的那天。当天上午,史洛夫按照要求来到推特总部,但马斯克刚从内华达州的 Cybertruck 发布会上赶回来,所以他向史洛夫道歉,他忘了自己还要飞往新奥尔良与马克龙总统会面,讨论欧洲的内容审核规定。他让史洛夫当天晚上再来。在等待马克龙时,马斯克给史洛夫发了信息,把他们的会面时间又往后推了:“我要推迟四个小时,你介意再等等吗?”也正是在那时,他突然给巴里·韦斯和内莉·鲍尔斯发信息,让她们当晚飞到旧金山来与他见面,帮着处理“推特文件”。
马斯克在当天深夜返回旧金山后,终于有机会与史洛夫坐在一起。史洛夫解释了他正在研究的神经网络路径规划项目的细节。他说:“我认为继续完成我手头的工作非常重要。”听了他的话,马斯克再次对这个项目产生了很大的兴趣,同意让他留任。马斯克意识到,未来特斯拉将不仅是一家电动车公司或清洁能源公司,凭借全自动驾驶系统、Optimus 和能够完成机器学习的 Dojo 超级计算机,特斯拉将成为一家人工智能公司:不仅要在聊天机器人的虚拟世界中运营,还要在围绕着工厂和道路环境的现实世界中运营。他已经在考虑聘请一批人工智能专家与 OpenAI 展开竞争,特斯拉的神经网络路径规划团队将对他们的工作起到补充作用。
多年来,特斯拉的自动驾驶系统一直依赖基于规则的算法。该系统从车辆摄像头获取视觉数据,识别车道标记、行人、车辆、交通信号及 8 个摄像头范围内的所有事物,再应用一系列规则,比如红灯停、绿灯行、保持在车道线标记正中、不越过双黄线闯入对面车道、通过交叉路口时保证其他车辆的行驶速度不足以撞上我方车辆。特斯拉的工程师手动编写并更新了数十万行 C++ 代码,以便将这些规则应用于更复杂的情况。
史洛夫正在做的神经网络路径规划项目将把这套系统提升到新的层面。他说:“我们不再只根据规则确定车辆的正确行驶路线,而是通过神经网络来确定车辆的正确行驶路线。”换句话说,这是对人类的模仿。面对某种情况,神经网络会根据人类在数以千计的类似情况下所做的事情规划路径。这就像人类学习一切行为的方式一样—说话、开车、下棋、吃意大利面……我们可能会被赋予一套需要遵循的规则,但我们主要是通过观察其他人的做法来掌握这些技能。这是艾伦·图灵在 1950 年发表的论文《计算机器与智能》中设想的机器学习方法。
特斯拉拥有世界上用于训练神经网络的最大的超级计算机之一,它由人工智能计算公司 Nvidia 的图形处理器(GPU)驱动。马斯克在 2023 年的目标是逐渐过渡到使用 Dojo,Dojo 是特斯拉从零开始打造的一款超级计算机,它使用视频数据训练人工智能系统,拥有特斯拉人工智能团队内部设计的芯片和基础架构,每秒近 800 亿亿次浮点运算的处理能力,使其成为世界上服务于这一目标的最强大的计算机。它将用于自动驾驶软件和Optimus。马斯克说:“把它们放在一起工作非常有意思,它们都在努力为这个世界指引前进的方向。”
到 2023 年年初,神经网络路径规划项目已经分析了从特斯拉客户车辆上收集的 1 000 万帧视频画面。这是不是意味着它只能达到人类驾驶员的平均水平呢?史洛夫解释说:“不,因为我们只在人类处理各类情况处理得还不错的时候才使用他们的数据进行学习。”纽约布法罗的人类标记员会对视频进行评估并给出分数。马斯克让他们找出“Uber 五星司机会采取的做法”,而这些视频就是用来训练计算机的。
马斯克经常在特斯拉位于帕洛阿尔托的大楼里走来走去,自动驾驶工程师坐在开放的工作区里,他会半跪在他们身旁,即兴讨论一些问题。有一天,史洛夫向他展示了他们取得的进展。马斯克对此印象深刻,但他有一个疑问:是不是真的需要这种全新的方法呢?会不会有点儿矫枉过正呢?马斯克的一句座右铭就是:永远不要用导弹打苍蝇,你应该用苍蝇拍。为了处理一些不太可能发生的、边边角角的极端情况,用神经网络来规划路径会不会是一种过于复杂的方式呢?
史洛夫向马斯克展示了神经网络路径规划比基于规则的方法更有效的实例。演示中的道路上到处都是垃圾桶、倒下的交通锥筒和散落的杂物。在神经网络路径规划的引导下,车辆能够绕过障碍物,越过车道线,并在必要时打破一些规则。史洛夫告诉马斯克:“当我们从基于规则的算法转向基于神经网络的路径算法时,这种情况就会发生,即使在混乱的环境中,如果你打开了这项功能,车辆也不会发生碰撞。”这种跨越到未来的感觉让马斯克兴奋不已。他说:“我们应该做一次像 007 系列电影场面的酷炫演示,四面八方都有炸弹爆炸,不明飞行物从天而降,而这辆车飞速驶过,不会撞到任何东西。”
机器学习系统在进行自我训练时通常需要一个目标或指标作为指导。马斯克在管理时喜欢通过下命令的方式来决定哪些指标最重要,于是他给了他们一个标准:特斯拉全自动驾驶车辆在没有人类干预的情况下能够行驶的里程数。“我希望每次开会的第一张幻灯片都能展示每次干预前自动行驶里程的最新数据。”马斯克说,“如果训练人工智能,我们应该优化什么?答案是提高两次干预之间的行驶里程数。”他告诉他们,要像打游戏一样,每天都能看到自己的得分。“没有分数的电子游戏是无聊的,所以每天看着单次干预前的里程数增加就会很有干劲儿。”
团队成员在工作区安装了 85 英寸的巨大显示屏,实时显示完全自动驾驶车辆在没有干预措施的情况下平均行驶了多少英里。每当他们看到某一类干预措施再次出现,比如驾驶员在变道、并线或转弯进入复杂路口时抓住了方向盘,他们就会同时与规则团队和神经网络路径规划团队通力合作,对这一问题进行修复。他们在办公桌附近放了一面锣,每当他们成功解决了一个导致干预出现的问题,他们就敲一次锣。
人工智能试驾
2023 年 4 月中旬,是时候让马斯克测试一下这项新的神经网络路径规划技术。史洛夫和自动驾驶团队安排了一辆试验车,它能让一个用神经网络训练的软件模仿人类驾驶员的操作,软件中只有最基础的传统规则代码。马斯克就坐在这辆车里,开始在帕洛阿尔托兜风。
马斯克坐在驾驶座上,旁边坐的是特斯拉自动驾驶软件总监阿肖克·埃卢斯瓦米。史洛夫和团队的另外两名成员马特·鲍赫和克里斯·佩恩坐在后排,这三个人在特斯拉的办公桌相邻,已经共事了 8 年,他们在旧金山的住处也相距不远。一般同事的办公桌上会摆一张同家人的合影,而这三个人的桌上都放着同一张他们仨在万圣节派对上的合影。詹姆斯·马斯克曾是这个小团队的第四名成员,埃隆·马斯克接管推特后,把他调了过去,而史洛夫逃过了这一劫。他们驶离特斯拉的帕洛阿尔托办公大楼的停车场前,马斯克在地图上选了一个目的地,点击“完全自动驾驶”按钮,随后双手离开方向盘。试验车拐上主干道时,第一个可怕的挑战出现了:一名骑车人朝他们迎面而来。“我们都屏住了呼吸,因为骑车人的行为很难预测。”史洛夫说。但马斯克毫不在意,也没去抓方向盘,车就自己避让了过去。史洛夫说:“感觉就跟人类驾驶员做出的判断一样。”
史洛夫和他的两名队友详细解释了他们的完全自动驾驶软件是怎么用特斯拉用户的车载摄像头收集的数百万个视频片段进行训练的,结果是这样做出来的软件堆栈比人类编程规定好数千条规则的传统堆栈要简单得多。史洛夫说:“它的运行速度快了 10 倍,可以直接删掉 30 万行代码。”鲍赫说这就像人工智能机器人在玩一款非常无聊的视频游戏,马斯克笑了起来。后来当这辆试验车能在车流中自如穿梭时,他就掏出手机发起了推文。
有长达 25 分钟,这辆车一直在快速路和街道上行驶,完成了一些复杂的转弯,避开了各种骑车人、行人和宠物。马斯克一直没有碰方向盘,只有几次他认为车辆操作过于谨慎时,才会轻点加速踏板进行干预,比如在看到四向停车标识时。这辆车的其中一次操作,马斯克觉得比他自己做的还要好,他说:“哇,连我这脑袋里的神经网络都搞不定这种情况,但它竟然做得很不错。”他非常高兴,吹起了莫扎特《G 大调第 13 号弦乐小夜曲》的口哨。
“干得太棒了,伙计们!”马斯克最后总结,“让我大开眼界。”随后他们一起去参加了自动驾驶团队的周例会,20 个人围坐在会议桌旁,几乎都穿着黑色 T 恤,他们准备接受马斯克的“审判”。很多人不相信这个神经网络路径规划项目能成功,但马斯克宣布他现在彻底相信了,他们应该调集大量资源来推进这个项目。
在讨论过程中,马斯克抓住了团队发现的一个关键事实:神经网络至少得经过 100 万个视频片段的训练才能达到良好的工作状态,如果训练量达到 150 万个视频片段,它就相当理想了。与其他车企和人工智能公司相比,这给特斯拉带来了巨大的优势。特斯拉在全球的保有量接近 200 万辆,每天能收集几十亿帧视频画面。埃卢斯瓦米在会上说:“我们在这方面有着得天独厚的优势。”
不管是自动驾驶汽车、Optimus,还是类似 ChatGPT 的机器人,收集并分析大量实时数据信息流的能力对各种形式的人工智能都至关重要。马斯克现在有两个强大的实时数据采集器:一个是自动驾驶车辆拍摄的视频,另一个是全球推特用户每周发布的数十亿条推文。马斯克在自动驾驶会议上说他刚刚又买了 1 万个 GPU 数据处理芯片供推特使用,他还宣布要更频繁地召开会议,大家要讨论特斯拉正在设计的、可能变得更加强大的 Dojo 芯片。另外,他难过地承认在圣诞节期间冲动地把萨克拉门托数据中心“大卸八块”是他犯下的一个错误。
列席旁听会议的是一位人工智能领域的超级明星工程师,马斯克在那一周刚刚招募了他,他要为马斯克即将启动的一个新的秘密项目效力。
股市回暖,抄底炒股先开户!智能定投、条件单、个股雷达……送给你>>
海量资讯、精准解读,尽在新浪财经APP
责任编辑:王永生
猜你喜欢
中原银行(01216)建议选聘天职国际及天职香港为2024年度审计机构
证监会重磅发布! 推进建设一流投资银行和投资机构
原油交易提醒:油价续涨至一周高位,受中东冲突升级担忧和美国降息预期影响
异动快报:ST中泰(002092)7月24日10点9分触及跌停板
微导纳米(688147)1月9日主力资金净卖出26215万元
83位名家共筑国画“高峰之路”,广州画院举办中国画学术邀请展
城市24小时 北方第一地级市,这次要追天津?
(新春走基层)“春生”“香果”首次杭州过年 杭州动物园特制“火锅”年夜饭
咳嗽伤肺还是心血管疾病,胸痛你真的分得清么
图灵波浪210晚-白银触及关键压力区,B浪能否泥石俱下!
招商银行:A股还是H股?
1969年中苏冲突,朝鲜陈兵我国边境,毛主席:一招搞定
88家上市赣企晒出“成绩单”:2023年总营收超116万亿元 占全省GDP36%
重磅!OpenAI发布首个视频生成模型Sora,一句话生成一分钟视频
渗漏率50%之后,新能源车每增长1%,都要付出比油车更大的代价
中国重汽:上半年归母净利润预增超30% 龙头优势持续稳固
12星座下周运势揭秘(9月2日~8日)
百度股票吧群主:掌握股市动态,把握投资先机
魏牌高山首次OTA蓝山第四次OTA即将开启 新增技能制造局功能
新股公告 连连数字(02598)今起招股 预计3月28日上市 引入杭州城投及杭州高新作为基投各认购2332万美元的发售股份
#2024旅行日记# ————渔海子+后海子 [彩虹]成都icon周
图灵波浪210晚-白银触及关键压力区,B浪能否泥石俱下!
外汇百晓生:黄金看涨依旧,继续围绕2392低多
为什么不建议修理变速箱?主要的原因有3条,很多老司机都搞错了
生态环境分区管控制度改革成果发布
6月新势力放榜,蔚来、极氪、零跑均突破两万辆
2023“北京·景贤杯”创新创业大赛邀请赛道初赛及复赛在深圳成功举办
天热就馋这碗面,10分钟上桌,好吃到舔盘,我家一周至少做3次
胜狮货柜(00716)将于9月20日派发中期股息每股3港仙
百度股票吧群主:掌握股市动态,把握投资先机