仙途智能Autowise.ai,作为全球领先的无人驾驶商业化企业,已在30余座国际都市成功部署其多样化的无人驾驶产品。为满足不同地区、多样化场景及众多产品的运营需求,该公司持续整合并吸纳最新的人工智能技术和算法。
近日,仙途智能推出新一代的1vN无人驾驶远程运营体系,该体系创新性地引入了多模态大模型技术,担任AI安全员的角色。此技术以其卓越的场景解读和精准判断能力,显著提升了无人驾驶车辆的安全性。
多模态大模型,作为人工智能领域的一项关键进展,能够整合文本、图像、音频和视频等多种数据形式,并具备强大的跨模态理解与生成能力。在无人驾驶领域,这一技术使得AI安全员能够实时处理车辆运行中的图像数据,迅速识别并应对潜在的危险场景。
除了处理常规交通情况,无人驾驶车辆还需应对所谓的“长尾场景”——这些罕见且复杂的情形对自动驾驶系统构成了巨大挑战。例如,仙途智能的无人驾驶清扫车在作业过程中可能遇到不规则路面坑洞或临时施工区域。长尾场景因其难以预测性和潜在的危险性,对自动驾驶系统的安全性提出了更高要求。
AI安全员在这些场景中发挥着至关重要的作用。当算法难以覆盖的特殊情况发生时,AI安全员能够利用其类似人类的知识和经验,准确理解场景并保障安全。仙途智能基于历史数据和仿真环境,构建了异常数据集,用于训练和提升AI安全员的能力。
在实际应用中,AI安全员能够识别多种复杂场景,如交通事故、交通管制、施工区域以及与应急车辆的交互等,并给出相应的驾驶建议。在某些紧急情况下,AI安全员还会请求人类远程安全员的介入,以提供额外的安全保障。
仙途智能的远程辅助驾驶系统为人类远程安全员提供了高清视频流、实时传感器数据等多种信息获取途径,以及多种挪车方式,确保在紧急和极端场景下车辆的安全脱困。
通过不断整合前沿技术,仙途智能显著提升了无人驾驶的安全性与稳定性,为其全球商业版图的扩展奠定了坚实基础。