盖世汽车讯 据外媒报道，消费类汽车可扩展自主软件供应商Ghost Autonomy宣布获得OpenAI初创基金（Startup Fund）500万美元的投资，用于将大规模、多模态大语言模型（MLLM）引入自动驾驶。这些资金将用于加速基于LLM的复杂场景理解（城市自治所需）的持续研究和开发。截至目前，新投资使该公司的总资金达到2.2亿美元。

图片来源：Ghost Autonomy

OpenAI首席运营官兼OpenAI初创基金经理Brad Lightcap表示：“多模态模型有可能将LLM的适用性扩展到许多新的用例，包括自动驾驶和汽车。多模态模型能够通过结合视频、图像和声音来理解并得出结论，因此创造出一种新的方式来理解场景并驾驭复杂或不寻常的环境。”

MLLM可能代表自动驾驶软件的新架构，能够处理罕见且复杂的驾驶场景的长尾问题。现有的单任务网络仅限于狭窄的范围和训练，而LLM允许自动驾驶系统对驾驶场景进行整体推理，利用广泛的世界知识来应对复杂和不寻常的情况，甚至是那些以前从未见过的情况。

Ghost Autonomy创始人兼首席执行官John Hayes表示：“长期以来，以可扩展的方式解决复杂的城市驾驶场景一直是该行业的圣杯，而LLM提供了一项突破，最终将使日常消费类车辆能够推理并应对最困难的场景。虽然LLM已经被证明对于数据标记和模拟等离线任务很有价值，但我们很高兴能够将这些强大的模型直接应用于驾驶任务，以充分发挥其潜力。”

Ghost的平台允许领先的汽车制造商将人工智能和先进的自动驾驶软件引入下一代车辆，以及现在可以通过MLLM扩展功能和用例。Ghost目前正在通过其开发团队积极测试这些功能，并与汽车制造商合作，共同验证新的大型模型并将其集成到自动驾驶堆栈中。