首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

纯视觉赛道再杀入一员“猛将” Nullmax推出新一代AI智能驾驶技术

IT时报记者 毛宇

在AI技术迅猛发展的当下,纯视觉智驾方案成为行业新热点。

7月16日,Nullmax“AI 无止境,智变新开端”2024技术发布会在上海举办。会上,Nullmax正式推出新一代自动驾驶技术“Nullmax Intelligence”(简称“NI”),宣告进入纯视觉智能驾驶行列。

NullMax创始人、CEO徐雷介绍,NI具有创新的多模态模型与安全类脑,能让汽车具备能看、会听、可读的感知能力,还能输出可视化结果、场景描述及驾驶行为。基于此技术,Nullmax计划于2025年实现全场景智驾应用的落地,并将AI能力拓展至载人、运货和机器人等广泛领域。

发布会上,《IT 时报》记者获悉,NullMax未来不会全力投身造车,而是更可能与海外合作伙伴携手打造智能车,共同探索智能驾驶的新未来。

从人眼到AI 纯视觉为了更好的智驾

近年来,由于重规则、泛化差、成本高、开不好等问题,智能驾驶的普及受到限制,范围、规模有待提升。如城市自动领航功能,表现保守机械;技术方案对激光雷达、特殊地图信息存在不同程度的依赖,应用局限在部分地区或道路;非豪华、非顶配车型较少拥有高阶功能等。同时在无人驾驶方面,应用也难以快速扩大范围,无法创造更大价值。

Nullmax推出的新一代自动驾驶技术NI,以更拟人的方式应对行业自动驾驶难题。在视觉基础上,NI增加了对声音、文本、手势等信息的输入支持,通过多模态的端到端模型进行任务推理,并构建了基于类脑神经网络的安全类脑,由系统整体输出可视化结果、场景描述和驾驶行为。

技术层面,NI不仅整合了Nullmax在静态感知、动态感知、时序融合方面的多项高水平研究,包括今年入选计算机视觉顶级会议CVPR 2024、ECCV 2024等视觉检测相关工作,同时将岩芯数智全国首个非Attention机制通用大模型Yan1.2在车端进行部署,并与岩思类脑研究院合作构建类脑神经网络。

独特的架构设计使得NI既可以像人类一样,根据接收的图像、声音、文字等各种信息进行思考,同时也具有“趋利避害”的生物本能,能够根据环境情况做出反应,从而实现更高程度的安全、智能、自由。

国内交通及道路状况相较于国外更加复杂,纯视觉方案的落地面临巨大挑战。对于纯视觉是否较激光雷达+高精地图方案更适用于国内道路,徐雷回答《IT时报》记者提问时表示,“Nullmax不排斥雷达+地图方案,事实上无论是哪一种方案,又或是增加算力和传感器,本质都是希望智驾将车开得更好。纯视觉对于智驾来说是must to have(必须有),激光雷达则是nice to have(有了更好)。事实上,视觉也是重要的传感器之一,像人驾一样,我们开车时也需要靠眼睛获取大量信息。”

纯视觉、真无图、多模态 开拓广阔应用

在不依赖激光雷达、双目相机的情况下,Nullmax通过纯视觉进行精准障碍物检测和三维重建,并通过实时生成局部地图结合基础导航,实现不依赖高精地图、轻地图、低精地图、众包地图的真无图应用。多模态以视觉为核心,可以输出包含静态感知、动态感知、场景描述和驾驶行为在内的多种信息。

这一系列特点使得Nullmax方案具有一定程度的泛化能力,支持全场景应用,并且算力需求更低,小于100T的稀疏算力即可实现全场景的领航辅助驾驶。更低的传感器成本和芯片成本,也令方案具有性价比优势,适合普及应用。

为支持NI模型壮大和应用拓展,Nullmax还构建了数据平台和算法平台。

发布会上,Nullmax展示了真实数据基础上,通过AIGC方式生成虚拟数据的示例视频,可加速模型开发与迭代,尤其是稀缺的高价值数据。目前,Nullmax已经实现了生成元素、图片及视频。面向真实数据和虚拟数据,在整个获取、挖掘、标注以及模型训练、评估、推送的全流程当中,Nullmax均具备高效的自动化处理。

通过对多模态输入token化、多模态模型推理和自动驾驶功能集成这三个环节进行抽象,以及自研中间件MaxOS的平台调度,Nullmax算法平台可支持多种车型,适配不同数量传感器,且易于部署。除了应用于自动驾驶汽车,这些算法能力同样可以复用至机器人上,比如视觉导航、学习人类行为、理解并与物理世界进行交互。

这意味着,NI不仅能够升级Nullmax的全阶智驾方案,提升高中低配置方案的拟人化、智能化程度,加速高阶智驾的普及,同时还能推动全场景的载人和运货应用,实现真正有价值的大范围无人驾驶;并且复用成套的AI技术能力,开拓更广阔的具身智能应用。

自2016年成立以来,Nullmax先后推出和落地了包括行泊一体在内的高中低配置智驾方案,为全球范围内的汽车厂商、Tier1等企业提供独特的多样化应用。面向未来,Nullmax将持续探索新技术,推进全场景的自动驾驶载人和运货落地,扩展具身智能应用,实现科技普惠。

  • 发表于:
  • 原文链接https://page.om.qq.com/page/O28-FI89bh1GM5X5JZdFV3jQ0
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

相关快讯

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券