Waymo利用谷歌Gemini 开发端到端自动驾驶模型
我要评论IT之家 10 月 31 日消息，用谷自动驾驶公司 Waymo 长期以来一直将与谷歌 DeepMind 的发端联系及其数十年的 AI 研究视为其在自动驾驶领域超越竞争对手的战略优势。现在这家 Alphabet 旗下的到端公司更进一步，为其机器人出租车开发一种基于谷歌多模态大语言模型（MLLM）“Gemini”的自动新训练模型。
Waymo 今天发布了一篇新的驾驶研究论文，介绍了一种名为“端到端多模态自动驾驶模型”（EMMA）的模型新模型。这种新的用谷端到端训练模型能够处理传感器数据，生成“自动驾驶车辆的发端未来轨迹”，帮助 Waymo 的到端无人驾驶车辆做出关于去哪里以及如何避开障碍物的决策。
但更重要的自动是，这是驾驶首次有迹象表明，自动驾驶领域的模型领导者计划将 MLLM 应用于其业务。这意味着 MLLM 可能不仅仅局限于聊天机器人、用谷电子邮件组织者和图像生成器等领域，发端而是到端可以扩展到自动驾驶领域。
在研究中 Waymo 提出，传统的自动驾驶系统通常会为感知、映射、预测和规划等各种功能开发特定的“模块”。虽然这种方法在过去多年中效果显著，但也存在可扩展性问题，主要是由于模块间的误差积累和通信有限。此外，这些模块由于是“预定义”的，因此面对“新环境”时适应能力较差。
Waymo 认为，像 Gemini 这样的 MLLM 可以解决这些问题。首先，这些模型是经过大量互联网数据训练的“通才”，能提供超出常规驾驶记录的丰富“世界知识”；其次，它们通过“链式推理”等技术展现出“卓越”的推理能力，能够将复杂任务分解为一系列逻辑步骤，模仿人类的思维方式。
Waymo 表示，EMMA 模型在帮助机器人出租车应对复杂环境方面表现良好。例如，当遇到各种动物或道路施工时，EMMA能够帮助无人驾驶汽车找到合适的行驶路线。
据悉，特斯拉等其他公司也在大力开发其自动驾驶汽车的端到端模型。特斯拉首席执行官埃隆・马斯克声称，最新版本的 FSD12.5.5 采用了“端到端神经网络”人工智能系统，将摄像头图像转换为驾驶决策。
这表明，在部署真正的无人驾驶车辆方面领先于特斯拉的 Waymo 也对追求端到端系统感兴趣。该公司表示，其 EMMA 模型在轨迹预测、物体检测和道路图理解方面表现出色。
但 EMMA 也有其局限性，Waymo 承认，在将该模型投入实践之前，还需要进行未来的研究。例如，EMMA 无法整合来自激光雷达或雷达的 3D 传感器输入，Waymo 表示这是因为“计算开销太高”，并且一次只能处理少量图像帧。
研究论文中未提及的另一个风险是，像 Gemini 这样的 MLLM 会存在“幻觉”，而无人驾驶汽车的容错率非常有限。因此，在这些模型能够大规模部署之前，还需要进行更多研究。
相关文章
12月26日消息，高速公路上突然出现动物，那么是该躲还是撞？据“山西高速交警四支队”最新通报，12月15日16时许，在青兰高速青兰方向）乡宁服务区附近，一辆小轿车因避让不及迎面2024-12-27
12月18日消息，据报道，富士康母公司鸿海精密看上了经营不善的日产汽车，试图收购其多数股权。不过，鸿海的收购意愿，也加速了日产和本田的合并谈判，双方均担心日产被鸿海收购。报道称，本田相关人士曾警告日产2024-12-27
巴萨进攻端5人今年总计打进91球，与梅西2012年一人进球数相同
12月6日讯 Score90统计了巴萨进攻端5名球员今年的进球总数，并与梅西做出对比。Score90指出，莱万、拉菲尼亚、亚马尔、费兰-托雷斯、法蒂2024年俱乐部+国家队总计打进91球，与梅西2012024-12-27
问一下，雅的6号位能不能带异常掌控由不会弹钢琴的朗朗发表在绝区零 834我有一个比较不错的异常掌控，但是很多人都说要给攻击力，但攻击刷不出来。我打算跟柳配对，所以问一下异常掌控可不可以带。我有一个比较2024-12-27
有钱人买车，看重的就是一个情绪价值。一位曾经专注迈巴赫多年，如今转战某国产豪华品牌的销售，曾经这样透露过豪车市场的选车逻辑：在入口上，对汽车品牌和车型的了解主要来自口口相传，广告是其次，但往往极其注重2024-12-27
12月18日消息，Omdia的最新研究数据显示，微软成为英伟达旗舰产品Hopper芯片的最大买家，其购买量远超其他科技巨头。微软今年采购了48.5万颗Hopper芯片，这一数字是英伟达在美国第二大客户2024-12-27
最新评论