3月23日-24日，2024全球开发者先锋大会（GDC）在上海举行。由岩山科技旗下岩芯数智主办的大会同期活动“大模型技术创新与应用探索讲坛”顺利召开，来自政、企、学各界的专家与领军人物齐聚一堂，共话大模型发展。
开场环节，上海市人工智能行业协会副秘书长徐琦进行了讲话，指出大模型在自然语言处理、图像识别、无人驾驶、医疗诊断等领域展现出巨大潜力。岩芯数智董事长陈代千为活动进行了致辞，“期望借此加深行业内合作与碰撞，激发更多的创新思维和灵感火花，推动人工智能大模型行业迈向新的高度，构建开创安全高效的多模态人工智能新生态。”
△ 岩芯数智董事长陈代千致辞
围绕如何更好地开发和利用大模型，切实推动大模型的创新应用，讲坛嘉宾纷纷介绍了各自领域的研发和实践。其中，针对“大模型的规模化应用与挑战”，Nullmax首席科学家成二康博士分享了在自动驾驶大规模落地方面的经验，并介绍了基于大模型打造下一代自动驾驶形态的技术思考，通过生成式、提示学习以及人类反馈强化学习，实现体验更佳、开发效率更高的大规模自动驾驶。
基于大模型打造下一代自动驾驶
大模型在众多领域表现出了非凡的应用价值，自动驾驶作为AI应用的集大成者，也是最适合开展大模型创新应用的领域之一。现场，成二康博士分享了Nullmax基于大模型打造下一代自动驾驶形态的思考。
在Nullmax看来，构建以大模型为基础的下一代自动驾驶形态，不仅可以更好地理解物理世界和人类驾驶行为，实现更高级的自动驾驶。同时，在面对不同客户的需求时，也能够更高效地完成方案的开发，显著降低整体的开发成本。
为此，Nullmax通过三方面的技术布局，打造以大模型为基础的下一代自动驾驶技术形态。一是构建强大的世界模型，更好、更真实地生成丰富的自动驾驶数据；二是将基础模型与提示学习相结合，实现平台化的交付；三是通过人类反馈强化学习，大规模地闭环学习人类驾驶行为，提升自动驾驶的智能水平。
由于自动驾驶模型的训练，尤其是端到端自动驾驶模型的训练，依赖于大量的数据。而数据的采集、标注，需要大量的时间和成本，并且部分数据难以获取。因此，Nullmax正在构建一个强大的世界模型，既可以生成未来时刻的视频，也能理解人类的驾驶行为，通过这种生成式的方式，来高效获得自动驾驶需要的海量感知、规控数据。
在这一基础上，Nullmax同样在打造一个能够理解静态场景、动态场景以及驾驶行为的基础模型，并且结合提示学习，实现同一基础模型衍生不同自动驾驶产品的技术构想，提升落地效率。当面对不同的需求时，这套技术架构只需针对性地设计提示，就可以完成不同项目以及不同任务、传感器配置的落地。
而为了实现扩展性更高、更贴近人类驾驶的自动驾驶应用，Nullmax通过人类反馈强化学习，来更好地学习人类驾驶行为，达成更强的泛化能力。现阶段，城市NOA功能主要使用的是基于规则的算法，体验上存在一些不足，因此可以通过大规模闭环地学习人类驾驶行为，打造基于学习的规划控制，进而实现更高级的自动驾驶。
Nullmax相信大模型的创新与应用，将会加速自动驾驶的发展，为无人驾驶的最终到来提供关键的技术支撑。打造以大模型为基础的下一代的自动驾驶形态，将能实现更加出色的出行体验，以及更加高效的开发和落地。