11月27日,在2024「绝影实力AI DAY」上,商汤绝影全面展示了“驾-舱-云”三位一体的通用人工智能(AGI)产品体系与战略布局,发布智能座舱交互革新、端到端智能驾驶等前沿领域的创新成就。
智舱方面,商汤绝影行业首发智能座舱大模型创新产品“A New Member For U”(你的家庭新成员)。
智驾方面,商汤绝影构建了“车云一体”的产品矩阵,发布涵盖高速、城区以及泊车等全场景的高阶智驾、端到端智驾等绝影量产智驾产品体系,同时全新升级行业标杆级别的“开悟”世界模型,以此打造坚实的数据基础设施。
据介绍,作为最专注汽车行业的AI公司,商汤绝影同时具备丰沛算力、原生汽车垂类大模型研发能力、高质量数据体系和丰富量产经验等全栈实力,全力以赴推动大模型上车,打造领先的AI汽车创新技术和产品。
“我们已经站在AGI时代的门口。作为加速智能汽车驶入AGI时代的战略合作伙伴,商汤绝影将牢牢把握住新一轮智能汽车变革的时间窗口,与车企伙伴进行全方位深度合作,共享大算力与大模型,共建数据基础设施,共同打造智能汽车大模型创新应用,才能携手共赢,领航未来。” 商汤绝影CEO、商汤科技联合创始人、首席科学家王晓刚表示。
车机不应该只是听话和服从的“被动智能”,依托AI实力重新定义座舱,商汤希望不只是赋予汽车以智能,更赋予智能以温度。未来,它不再只是冰冷的工具或者机械式的助理,而是“A New Member For U”。
依托原生流式多模态大模型、车载类人记忆框架和持续运行框架等AI大模型技术,商汤绝影希望让智能汽车拥有“有趣的灵魂”。
以商汤绝影的原生流式多模态大模型为基础,“家庭新成员”能全面感知用户的语音、表情、手势、以及环境数据,并进行深度理解和推理思考,具备理解世界、理解人类的能力。
汽车也要拥有“记忆”,为此,商汤绝影打造了国内首个“车载类人记忆框架”,让系统实现类人的记忆能力。
商汤绝影的记忆框架与人类的记忆机制非常相似。它有临时记忆,也有长期记忆,还可以自我迭代,从用户长期使用中总结规律并不断优化。
此外,商汤绝影还打造了能够持续推理的Always-on运行框架,将多模态感知到的信息与各种记忆相结合,依托端云协同架构,数据延迟控制在1毫秒以下,首包延时最快只需60毫秒,推理速度达40 Tokens/秒,对数据进行高效处理和反馈,时刻感知需求,主动为用户服务。
智能驾驶方面,商汤绝影全面展示了基于J6E、J6M、Orin等不同算力平台打造的全场景高阶智驾、端到端智驾等绝影量产智驾产品体系。
据介绍,商汤绝影的智驾量产交付也在稳步推进,基于J6平台的智驾方案预计2025年第二季度将量产交付,而量产端到端智驾方案则预计会在明年年底量产落地。
“智驾高端局的竞争不止是车端模型的比拼,端到端的决战,战场在云端。”王晓刚表示。
为此,商汤绝影全新升级并发布行业标杆级别的世界模型——“开悟”世界模型。
如今,商汤绝影已与超30家国内外车企达成合作,覆盖100余款车型,预计至2024年底,量产交付累计将突破350万辆。