探索未来的新过程小鹏汽车科学日说了什么在线技术快报,安装头条快报
10月24日,以“从预见到超越满意”为主题的第四个“1024小鹏汽车科技日”如期到来。在智能驾驶、智能交互、智能机器人和飞行汽车四个维度上,未来出行领域的探索过程和量产推进计划共享小鹏汽车年。
在智能驾驶方面,小鹏汽车不仅分享了业内首个量产城市先进驾驶辅助功能“城市NGP”的技术思路,还展示了其基于新一代XNGP智能驾驶辅助系统、AI和数据系统的竞争优势的软件架构,在智能驾驶的下半场保持领先。
在智能交互方面,由于对小鹏语音体验的研究进一步加强,新一代语音架构和基础语音能力,借助全场景语音2.0,构建了业内首个整车全程语音交互系统,通过智能场景功能,实现了用户“自定义智能汽车”。
在智能机器人与飞行领域汽车,小鹏也分享了技术进化的最新思想和成果。智能机器人和飞行汽车都有新一代的建模和功能设计。飞行汽车已经完成了测试原型的第一次试飞。小鹏汽车我们希望通过不断的探索和思考,建立技术竞争优势,不断推动行业向前发展,通过智能技术的量产,真正为用户带来更好的出行生活。
小鹏智能辅助驾驶的未来发展
城市场景的落地只是智能辅助驾驶下半场的开始。小鹏 G9搭载的XNGP智能辅助驾驶系统具有全场景智能辅助驾驶的能力,这也是无人驾驶之前辅助驾驶的终极技术形式。它可以在全国所有城市和地区使用,无需高精度地图。同时,它可以覆盖日常通勤,无缝连接高速公路、城市和地下停车场等场景,不打断体验。XNGP在高速和城市速度、接近零接管、安全、道路游戏能力和交通效率方面也将比大多数司机更有经验。为了实现这一能力,小鹏汽车对硬件进行了大幅升级,使用了508 TOP计算能力+双激光雷达+800W像素高清摄像头,再次应用了能力提升的软件架构,以及全闭环、自生长的AI和数据系统。
XNGP智能驾驶辅助系统
其中,深度XNet视觉神经网络多摄像头采集数据,进行多帧序列融合后,输出BEV下动态目标的4d信息(如车辆、车轮等,距离、位置和速度、行为预测大小等),以及静态目标的3d信息(如车道线位置、道路边缘等)。与第一代视觉感知体系结构小鹏汽车相比,XNet使用神经网络代替了复杂的手写逻辑,实现了端到端数据驱动的算法迭代。当然,辉煌技术的背后是大量的数据采集、标记、训练和间隔部署。以50万个训练数据片段和10亿个对象为例,人工标记2400TFLOPS需要2000人年,单机训练需要276天。同时,如果不进行优化就部署到车辆上,单个网络的计算能力仅为单个Orin-X的122%。因此,小鹏汽车建立一个自动标签系统,标签效率是手动标签的45000倍。也就是说,XNet需要2000人年的标签。现在只需要16.7天就能完成。此外,小鹏汽车在乌兰察布建立了中国最大的自动驾驶智能计算中心“扶摇”,该中心基于阿里云智能计算平台,可实现600 pFLOPS(每秒6万亿浮点运算)。在“扶摇”的支持下,自动驾驶模型的训练效率提高了602倍。与2400TOPS的单机训练相比,80机并行训练可以将训练时间从276天缩短到11小时。同时,城市ngp发展积累的极限工程能力,使动态XNet能够将Orin-X计算能力从122%优化到仅9%。最终的工程部署能力是XNet发布和未来迭代的关键。
XNet深度视觉神经网络
此外,数据闭环的基本能力包括四个核心能力:采集、标记、训练和部署。效率是人工智能系统的重要KPI之一。因此,小鹏汽车通过有针对性的收集大量车辆,可以收集到大量的训练数据,并在自动标签系统和扶摇的帮助下快速校正。即使对于一些非常罕见的极端场景,通过仿真系统也可以生成大量同类型的数据,进行快速迭代训练。通过定向采集与仿真相结合,在一年内解决了1000余个转角案例(极端场景),高速NGP事故率降低95%。同时,每一行代码变更都需要经过5000万公里的仿真里程,5000+个核心仿真场景,17000+个特殊仿真场景,以保证功能迭代和正向演化的可靠性。
在硬件和软件系统带来的高效率下,到2023年上半年,XNGP系统将能够在全国范围内(在所有没有地图的城市)识别红绿灯和通过十字路口。此外,G9 Max车型出厂时,还可实现高速NGP、记忆停车、LCC、智能停车等功能。城市NGP覆盖广州、深圳和上海。2023年下半年,大部分没有地图的城市将开放换道、超车、左右转弯等功能(部分高级功能可用范围将根据用户数量和测试进度分阶段开放)。整个场景将于2024年完成,实现从停车位到停车位的智能导航辅助驾驶能力。此外,对于XPILOT版本的用户,小鹏的智能辅助驾驶功能将不断更新。从2022年到2023年上半年,小鹏G9 Pro将在交付时提供基于高速NGP、记忆停车、LCC、智能停车等功能的红绿灯识别和车道级导航功能。这些功能也将在小鹏P5和E, 小鹏 P7E和直尊版本中提供。小鹏城市NGP的P5-P版本将增加开放城市深圳和上海,城市NGP和LCC增强版的性能也将进一步提升。2023年下半年,小鹏G9 Pro版高速NGP、VPA和LCC将满足性能提升,以上所有车型的高速NGG功能也将满足限速调整和卸载检测的战略优化。
XNGP发布计划
XPILOT发布计划
近日,小鹏汽车也完成了突破性工作,顺利通过自动驾驶封闭现场测试,并取得智能联网汽车路试牌照。G9成为业界第一款不更换硬件的车型。仅通过自动驾驶软件升级,已顺利通过自动驾驶封闭现场测试,获得“智能联网汽车路试”牌照。未来小鹏汽车将通过自动驾驶和先进辅助驾驶的双并行实现数据和能力的反馈循环。
更快更自由的语音交互小鹏汽车升级自主研发语音架构,首个自主研发语音基本功能
2020年1024年,小鹏汽车首创了业内的“全场景语音”功能技术,出乎所有人的意料,成为业内第一个全场景语音交互系统。两年后,小鹏仍然不满意。以不断探索的精神,推动了用户体验的提升,让交互更快更自由,带来了业内首个全车专职语音交互功能——全场景语音2.0。首次将MIMO多通道技术应用于车载语音系统,实现小P的全天候待机,使多名乘客无需叫醒,多人可同时进行人车语音对话;G9还有效利用本地计算能力进行本地对话,在弱网络和无网络条件下可以稳定控制600多种车辆功能。此外,凭借完善的语音终端云集成方案,G9的语音响应速度达到毫秒级,更接近人性化通信。照你说的做。
全场景语音2.0
为了实现这一目标,小鹏汽车不仅对自主研发的语音交互技术架构进行了升级,而且具备了先进的功能、灵活的架构和性能特点。还能解决研发周期长、进度不可控、关键技术内外复杂风险和项目风险等问题,进一步提高隐私和安全水平,保护用户利益。该技术架构可实现全车多通道语音流的并行处理,支持处理具有四音并发、端到端云集成、实时流识别与理解、并行指令等多种功能的语音交互请求。此外,它可以实现对车辆的多上下文理解,同时保持单一对话和上下文管理,并兼容多人对话和上下文理解。当请求的噪声量是单声道降噪的数倍时,准确率仍不降低,解决了多声道语音与四声道语音交互的响应冲突,使用户实现语音交互,得到更好的反馈。
行业第一家汽车独立开发基本语音能力的企业
此外,小鹏汽车是业内首个自主研发的语音基础能力,包括声学信号处理、本地语音识别、在线语音识别和语音唤醒。这将有助于小鹏解决新一代系统对信号处理的更高要求,解决复杂度更高的语音问题,并大大提高性能指标。例如,回波抵消可支持高达30dB,识别精度可达97%。与自主开发的非基础能力相比,标准安静场景的错误率降低了7.7%,混合场景的错误率降低了7.16%,嘈杂场景的错误率降低了36.79%,地域口音场景的错误率降低了33.84%。同时,自主开发的语音基础功能还降低了语音的CPU利用率65.9%,内存利用率42.3%。在优化工程能力的同时,实现了快速迭代、用户隐私安全和数据成本。
未来小鹏汽车的语音功能将向人机交互的方向发展:语音助手可以听语音、观察语音、查看颜色,实现自由轻松的交流;理解、学习、推理、记忆,成为朋友友更好的用户;能感知、能感受、能表达,成为整个场景中陪伴用户的可靠伙伴。
智能场景允许用户“自定义智能汽车”
智能场景是智能座舱小鹏的一个新的定制功能,允许用户拥有专属的座舱功能和服务。它开放了业界领先的车辆能力原子,可以创建无限的车辆场景,允许用户定义自己的智能汽车。同时,当用户不在车上时,车辆可以根据自身感知能力持续实施定制化场景,首次开发远程智能场景;在多个场景之间,可以根据前一个场景的执行结果,主动判断后续的场景,从而满足用户在整个出行周期的全职需求。普通用户可直接选择自己喜欢的场景,一键打开整个服务,支持社区、社交媒体交流、跨车传承;极客用户也可以深度参与共创作,这是开启想象力的关键系列。
智能场景功能示意图
智能机器人“小白龙”又成长了一年
小鹏自2021年首次亮相以来,鹏航的智能机器人今年继续探索,迎来了新一代的原型。与上一代相比,目前的模型更科幻,更有未来风格:头部集成AR投影,是对机器人交互形式的探索;鞋底采用与高端跑鞋相同的“EVA超临界泡沫”和耐磨橡胶,具有优异的减震、静音、耐磨性能。颈部等部位采用新型弹性面料和液体硅胶材料,解决了多自由度运动、抗冲击、抗划伤的设计问题。
小鹏鹏航新一代智能机器人
除了造型的升级,“小白龙”也迎来了建筑的升级。身体和腿的“骨架”借鉴了汽车领域的轻量化设计理念,比原来更结实、更轻;新一代AI计算单元和智能汽车计算能力极大地增强了机器人的智能潜力;同时,它还配备了高保真音响系统,带来先进的音视频娱乐;当然,最值得注意的是,升级后的小白龙配备了六轴协同机械手,可以配合四足底盘在家庭环境中执行多种功能,大大提高了机器人与物理环境交互的潜力。
在小鹏生态系统中,在智能机器人研发过程中,从智能汽车研发领域有效赋能了动态系统、自动驾驶、人机交互、研发系统等技术,包括动态系统、自动驾驶、人机交互和AI能力。AI能力将成为驱动机器人智能和汽车智能技术发展的“引擎”,数据将成为驱动技术发展的能量,汽车智能和机器人智能将“相辅相成”。目前,关于机器人最佳形态的讨论还在进行中,未来鹏航的产品可能会有新的形态。