商汤绝影发布多款智能汽车创新技术产品,全力推动大模型上车
- 行业
- 2024-11-30 10:43
11月27日,在2024「绝影实力AI DAY」上,商汤绝影全面展示了“驾-舱-云”三位一体的通用人工智能(AGI)产品体系与战略布局,发布智能座舱交互革新、端到端智能驾驶等前沿领域的创新成就。智舱方面,商汤绝影行业首发智能座舱大模型创新产品“A New Member For U”(你..
11月27日,在2024「绝影实力AI DAY」上,商汤绝影全面展示了“驾-舱-云”三位一体的通用人工智能(AGI)产品体系与战略布局,发布智能座舱交互革新、端到端智能驾驶等前沿领域的创新成就。
智舱方面,商汤绝影行业首发智能座舱大模型创新产品“A New Member For U”(你的家庭新成员)。
智驾方面,商汤绝影构建了“车云一体”的产品矩阵,发布涵盖高速、城区以及泊车等全场景的高阶智驾、端到端智驾等绝影量产智驾产品体系,同时全新升级行业标杆级别的“开悟”世界模型,以此打造坚实的数据基础设施。
据介绍,作为最专注汽车行业的AI公司,商汤绝影同时具备丰沛算力、原生汽车垂类大模型研发能力、高质量数据体系和丰富量产经验等全栈实力,全力以赴推动大模型上车,打造领先的AI汽车创新技术和产品。
“我们已经站在AGI时代的门口。作为加速智能汽车驶入AGI时代的战略合作伙伴,商汤绝影将牢牢把握住新一轮智能汽车变革的时间窗口,与车企伙伴进行全方位深度合作,共享大算力与大模型,共建数据基础设施,共同打造智能汽车大模型创新应用,才能携手共赢,领航未来。” 商汤绝影CEO、商汤科技联合创始人、首席科学家王晓刚表示。
商汤绝影CEO、商汤科技联合创始人、首席科学家 王晓刚
引领座舱交互体验的革新
车机不应该只是听话和服从的“被动智能”,依托AI实力重新定义座舱,商汤希望不只是赋予汽车以智能,更赋予智能以温度。未来,它不再只是冰冷的工具或者机械式的助理,而是“A New Member For U”。
依托原生流式多模态大模型、车载类人记忆框架和持续运行框架等前沿AI大模型技术,商汤绝影希望让智能汽车拥有“有趣的灵魂”。
以商汤绝影的原生流式多模态大模型为基础,“家庭新成员”能全面感知用户的语音、表情、手势、以及环境数据,并进行深度理解和推理思考,具备理解世界、理解人类的能力。
汽车也要拥有“记忆”,为此,商汤绝影打造了国内首个“车载类人记忆框架”,让系统实现类人的记忆能力。
商汤绝影的记忆框架与人类的记忆机制非常相似。它有临时记忆,也有长期记忆,还可以自我迭代,从用户长期使用中总结规律并不断优化。
此外,商汤绝影还打造了能够持续推理的Always-on运行框架,将多模态感知到的信息与各种记忆相结合,依托端云协同架构,数据延迟控制在1毫秒以下,首包延时最快只需60毫秒,推理速度达40 Tokens/秒,对数据进行高效处理和反馈,时刻感知需求,主动为用户服务。
隐私安全保护方面,通过全方位的隐私保护与数据安全体系,商汤绝影可以做到“数据跟人走”、“隐私数据不出车”、“不该说的不说”,确保系统在安全合规的前提下提供体验。
端到端量产在即
智能驾驶方面,商汤绝影全面展示了基于J6E、J6M、Orin等不同算力平台打造的全场景高阶智驾、端到端智驾等绝影量产智驾产品体系。
据介绍,商汤绝影的智驾量产交付也在稳步推进,基于J6平台的智驾方案预计2025年第二季度将量产交付,而量产端到端智驾方案则预计会在明年年底量产落地。
目前,大多数车企和智驾公司都面临着高质量驾驶数据的获取难度大、效率低、成本高的问题。
为解决这一问题,商汤绝影通过实车采集和仿真生成“双轮驱动”的数据闭环,构建量产智驾产品体系和世界模型深度融合的“车云一体”智驾新范式。
“智驾高端局的竞争不止是车端模型的比拼,端到端的决战,战场在云端。”王晓刚表示。
为此,商汤绝影全新升级并发布行业标杆级别的世界模型——“开悟”世界模型。
据介绍,世界模型最基础也是最核心的能力是生成高质量视频数据,高质量数据的关键在于“真实”。基于多模态大模型打造的绝影世界模型,能够理解真实世界的物理规则、交通规则,生成的视频数据也更加逼真。
在真实的基础上,“开悟”生成的场景视频,时间最长为150秒、分辨率可达1080P、视角可以实现11V,是行业首个同时完成上述指标的智驾世界模型。
更重要的是,通过多模态大模型,“开悟”世界模型可以支持多样化的自动驾驶场景及Corner case的可控生成。目前,商汤绝影基于1024类场景,能够泛化出更多的平行世界,打造了千万级的生成场景库,预计2025年对行业开放。
携手奇瑞大卓、东风汽车开展深度战略合作
据了解,商汤绝影智驾方案已量产交付广汽埃安、一汽红旗等3家车企6款车型。第三方调研数据显示,商汤绝影在座舱视觉AI软件市场的份额连续五年蝉联第一。此外座舱AI大模型产品已上车小米SU7、智己、LEVC L380等车型。
值得关注的是,商汤绝影面向海外市场升级了座舱视觉AI产品矩阵,助力极氪X的DMS系统斩获ENCAP历史最高分,并在「绝影实力AI DAY」首发ENCAP2026 OOP离位检测、身材检测功能。
如今,商汤绝影已与超30家国内外车企达成合作,覆盖100余款车型,预计至2024年底,量产交付累计将突破350万辆。
作为加速智能汽车驶入AGI时代的战略合作伙伴,商汤绝影正全力推动最前沿的AI技术与智能汽车产业的深度融合。
在商汤绝影看来,单打独斗难以在AGI时代脱颖而出,主机厂和AI公司必须以全新的方式进行深度战略合作才有可能形成行业竞争力。
据介绍,目前,商汤绝影已和大卓智能、东风汽车等合作伙伴签订战略合作协议,在高阶智驾量产、端到端量产、AI云服务、AI大模型等领域开展全方位的深度合作,加速自动驾驶的落地与进化。
共享强大算力集群与大模型能力、共建数据基础施设、共创智能汽车AI应用生态,这一全新合作模式是通往AGI未来的必由之路。
商汤绝影愿意和车企合作伙伴共享算力丰沛的商汤大装置,行业领先的20,000 P算力将为合作伙伴提供强有力的基础设施保障;同时,绝影将开放性能全面的基础大模型能力,提升车企的AI实力。
在共享大算力和大模型的基础上,双方能够加速研发体系的对齐,共同建设以高效率世界模型和全流程数据闭环为核心的数据基础设施。未来,数据的数量、质量和利用率等都不再是问题和阻碍,在智能汽车与云端平台之间流动的数据,将成为加速大模型上车的高效燃料。
来源:凤凰网