当前位置:首页 > 科技资讯 > 正文内容

Waymo 利用谷歌 Gemini 大语言模型,开发端到端自动驾驶模型

admin2个月前 (10-31)科技资讯945

来源:IT之家

IT之家 10 月 31 日消息,自动驾驶公司 Waymo 长期以来一直将与谷歌 DeepMind 的联系及其数十年的 AI 研究视为其在自动驾驶领域超越竞争对手的战略优势。现在这家 Alphabet 旗下的公司更进一步,为其机器人出租车开发一种基于谷歌多模态大语言模型(MLLM)“Gemini”的新训练模型。

Waymo 今天发布了一篇新的研究论文,介绍了一种名为“端到端多模态自动驾驶模型”(EMMA)的新模型。这种新的端到端训练模型能够处理传感器数据,生成“自动驾驶车辆的未来轨迹”,帮助 Waymo 的无人驾驶车辆做出关于去哪里以及如何避开障碍物的决策。

但更重要的是,这是首次有迹象表明,自动驾驶领域的领导者计划将 MLLM 应用于其业务。这意味着 MLLM 可能不仅仅局限于聊天机器人、电子邮件组织者和图像生成器等领域,而是可以扩展到自动驾驶领域。

在研究中 Waymo 提出,传统的自动驾驶系统通常会为感知、映射、预测和规划等各种功能开发特定的“模块”。虽然这种方法在过去多年中效果显著,但也存在可扩展性问题,主要是由于模块间的误差积累和通信有限。此外,这些模块由于是“预定义”的,因此面对“新环境”时适应能力较差。

Waymo 认为,像 Gemini 这样的 MLLM 可以解决这些问题。首先,这些模型是经过大量互联网数据训练的“通才”,能提供超出常规驾驶记录的丰富“世界知识”;其次,它们通过“链式推理”等技术展现出“卓越”的推理能力,能够将复杂任务分解为一系列逻辑步骤,模仿人类的思维方式。

Waymo 表示,EMMA 模型在帮助机器人出租车应对复杂环境方面表现良好。例如,当遇到各种动物或道路施工时,EMMA 能够帮助无人驾驶汽车找到合适的行驶路线。

IT之家注意到,特斯拉等其他公司也在大力开发其自动驾驶汽车的端到端模型。特斯拉首席执行官埃隆・马斯克声称,最新版本的 FSD 12.5.5 采用了“端到端神经网络”人工智能系统,将摄像头图像转换为驾驶决策。

这表明,在部署真正的无人驾驶车辆方面领先于特斯拉的 Waymo 也对追求端到端系统感兴趣。该公司表示,其 EMMA 模型在轨迹预测、物体检测和道路图理解方面表现出色。

但 EMMA 也有其局限性,Waymo 承认,在将该模型投入实践之前,还需要进行未来的研究。例如,EMMA 无法整合来自激光雷达或雷达的 3D 传感器输入,Waymo 表示这是因为“计算开销太高”,并且一次只能处理少量图像帧。

研究论文中未提及的另一个风险是,像 Gemini 这样的 MLLM 会存在“幻觉”,而无人驾驶汽车的容错率非常有限。因此,在这些模型能够大规模部署之前,还需要进行更多研究。

海量资讯、精准解读,尽在新浪财经APP

责任编辑:陈钰嘉

扫描二维码推送至手机访问。

版权声明:本文由ZBLOG发布,如需转载请注明出处。

本文链接:https://ynqbhy.com/post/888.html

分享给朋友:

“Waymo 利用谷歌 Gemini 大语言模型,开发端到端自动驾驶模型” 的相关文章

美国宣布:制裁印度公司

美国宣布:制裁印度公司

据彭博社9月6日报道,美国政府将两艘船舶以及相关的两家印度航运公司列入制裁名单。报道称,这是美国阻挠俄罗斯出口液化天然气的最新制裁措施。当地时间9月5日,美国财政部外国资产控制办公室(OFAC)宣布 ,将“木兰”号(Mulan)和“新能源”号(New Energy)两艘液化气船列入制裁名单。根据美国...

工厂挺价,现货加工费超1600元/吨!这个品种底气来自哪里?

工厂挺价,现货加工费超1600元/吨!这个品种底气来自哪里?

来源:期货日报近几日,短纤期货走势先抑后扬,截至昨日下午收盘,9月以来的跌幅已大部分收回。在近三日的价格反弹中,短纤期货领涨聚酯产业链,加工费升至近一年半以来的高点。期货日报记者了解到,本周短纤加工费重心继续抬升,截至9月13日收盘,短纤主力合约盘面加工费在1415元/吨,短纤现货加工费在1600元...

2100+篇原创理财干货大合集,越来越有钱

2100+篇原创理财干货大合集,越来越有钱

晚上好~我们的故事,始于2013年。发现身边太多朋友和同事辛苦工作却不了解基础的金融理财知识,仅专注于工作薪水缺乏财务安全和独立的意识。于是我们开始利用业余时间,尝试用简单有趣的方式阐述金融理财知识,创作关于个人理财的科普内容,立志打造最有爱的小白理财社区。在这个过程中,我们发现我们有帮助别人的力量...

2024澳彩管家婆资料传真,科学答案落实_RZ65.84.3

2024澳彩管家婆资料传真,科学答案落实_RZ65.84.3

2024年,对于世界体育迷来说注定是一个值得期待的一年。不仅有备受关注的奥运会和世界杯等顶级赛事,同时澳大利亚也将举办多项重要的体育赛事,如澳网公开赛、澳大利亚F1大奖赛等。这些赛事不仅吸引着众多体育爱好者的目光,也引发了科技和数据分析领域的广泛关注。科学数据在体育赛事中的应用近年来,科学数据分析在...

2024正版资料大全免费,答案分析落实_实用版41.93.94

2024正版资料大全免费,答案分析落实_实用版41.93.94

在瞬息万变的商业环境中,企业迫切需要获取全面、可靠的信息资源,以制定更加精准、有力的决策。《2024正版资料大全免费,答案分析落实等多元化_实用版41.93.94》正是为此而生,为企业提供了一个全新的信息服务平台。这份资料集汇聚了从政策法规、行业动态到市场分析等多方位的内容,为企业提供了全方位的数据...

600图库大全免费资料图2024,答案全面解释落实_展示版61.6.17

600图库大全免费资料图2024,答案全面解释落实_展示版61.6.17

在瞬息万变的数字时代,图像已经成为我们生活中不可或缺的一部分。从社交媒体到新闻报道,从商业营销到个人创作,无处不在的图像为我们打造了一个视觉丰富多彩的世界。而在这个世界中,2024年的图库大全无疑是最引人注目的明星之一。 这份全面、解释性的600图库大全资料集,不仅为我们呈现了2024年最新最热的...

发表评论

访客

◎欢迎参与讨论,请在这里发表您的看法和观点。