看完禾赛战略级产品Kosmo,禾赛至少值1000亿?
北京时间10月14日,在美股和港股双重上市的禾赛科技正式揭晓了其战略级新品——三维世界数据引擎Kosmo。该产品由一个硬件和一个云平台构成;硬件方面是全球首款8K超高清AI空间相机Kosmo One;云平台则是名为Kosmo World的AI驱动平台。
禾赛将Kosmo视为公司从激光雷达领域向物理AI核心基础设施转型的关键一步,同时也是其在已位居全球首位的激光雷达市场之外,开辟第二增长曲线的核心产品。
实际上,在深入了解Kosmo One的能力后,对Kosmo的兴趣会更为浓厚。用禾赛的话来说,虽然尚不确定Kosmo最终能渗透多少行业,但哪些行业或个人会拒绝影视级别的三维世界数据呢?人类始终在追求更真实地记录、还原和展示这个真实世界,Kosmo One是目前人类为实现这一追求而推出的最新产品。
今年4月首次接触Kosmo One的产品概念时,曾认为它要与大疆推出的热门单品Osmo Pocket 3竞争。但这次,在充分了解Kosmo构建和还原三维世界的能力后,结合人类不懈追求更真实记录、还原和展示真实世界的需求,Kosmo One对禾赛乃至整个世界的影响将远超Pocket 3对大疆和世界的影响。
一、Kosmo具备哪些能力?
以下解读非常硬核!
首先,此次发布的硬件Kosmo One,作为8K超高清AI空间相机,其核心作用是将真实世界数据化,转化为数据资产。
Kosmo One集成了具备空间解析能力的激光雷达、8K高清影像系统、一英寸CMOS大底以及高精度IMU,能够对空间几何、色彩、纹理和设备姿态进行微秒级同步采集。结合3DGS(3D Gaussian Splatting)重建技术与专门的ISP调校系统,它可以输出毫米级几何精度与8K影像级画质。
在操作上也非常便捷,即开即扫、智能指引和一键续扫这三大功能,大幅降低了空间采集的门槛。意味着从需要专业人员操作,转变为普通人无需培训即可完成采集。
Kosmo One采集到的三维世界数据,配合Kosmo World这一一站式3D内容创作与管理云平台,能够迅速将采集数据转化为AI可理解、可交互、可训练的智能空间。——这就是Kosmo的核心能力!
禾赛为此专门开发了一套原生3D空间重建与理解系统KSC:Kosmo Spatial Core。这套KSC系统能够一次性重建,同步生成3DGS、mesh、depth三种形态(可理解为三种格式?)的三维数据。
而原生的AIGC能力能让Kosmo One采集构建的数字空间更加完整:未被扫描的区域可以自动补全,材质与纹理能够智能识别重建,多视角信息实现无缝融合,最终生成完整、连贯、可自由漫游的三维场景。
借助AI驱动的3D语义分割,场景中的每个物体都能被独立识别和定义,从静态三维模型转变为具备语义信息与操作属性、能被物理AI理解的空间对象——真实世界由此转化为面向具身智能训练的sim-ready数据。
云平台Kosmo World则能将数字化的真实世界转变为高质量的三维空间数据。而当前对高质量三维空间数据需求最为迫切的,恰恰是当下最火爆、最前沿的具身智能和世界模型。在AI时代,谁拥有更多数据,谁就能训练出更好的模型和产品。
当然,不仅具身智能和世界模型需要高质量的三维数据,还有许多领域同样有此需求,例如影视媒体领域、文旅文博领域、空间商业化领域等。
除了行业领域的需求,Kosmo还能为个人提供真实记录三维世界、创作身临其境体验的能力。这让人想起大疆当年推出消费级无人机时,方便个人开启上帝视角记录世界和生活旅行的情景。
从这个角度看,也印证了先前的判断:Kosmo One对禾赛乃至世界的影响将远超Pocket 3对大疆和世界的影响。
二、为什么是禾赛推出Kosmo?
原因在于市场存在需求,同时禾赛拥有相应的底层技术能力。
从需求端来看,禾赛表示,在研发激光雷达的过程中,发现许多行业应用需要更高精度的激光雷达,精度从1厘米级到毫米级,甚至更高。并且,绝大多数应用都是将激光雷达与摄像头融合后,用于不同的垂直场景。
例如,曾因逼真和体验而火爆全网的《黑神话·悟空》,用于扫描庙宇、佛像等真实场景设备的骨架,使用的就是禾赛的产品。
这些垂直场景还包括广义的测绘行业、机器人数据训练,以及建筑、游戏行业等。这些不同垂直场景的参与者,拿着禾赛的激光雷达和摄像头进行融合,但由于需求不同,融合的效果、产品形态和质量也参差不齐。
禾赛看到了这个机会,希望打造一个超高集成度、具有“苹果产品质感”的产品,能够为不同垂直行业应用提供完成度高、功能较为完整的产品。
从这些需求的底层来看,都是对人类追求真实记录、还原和展示真实世界这一需求的体现。
而真实世界是三维立体的,激光雷达是一种具备三维感知能力的传感器。禾赛成立12年来,已成长为全球顶尖、掌握激光雷达底层技术能力的企业。最新推出的6D激光雷达正是这种底层技术能力的最新展示。所谓“6D”是一个巧妙的命名,用来表达空间的三维维度:XYZ,以及RGC色彩的三个参数Red、Green和Blue,两者相加共6个参数,因而得名“6D”。
当然,这样的6D激光雷达并非一蹴而就,而是禾赛成立12年来经历艰难摸索的结果。回顾禾赛的发展历程:这个团队2013年在硅谷起步,2014年上海注册落地,2015年进军车载激光雷达。
而激光雷达的大规模商业化,首先发生在自动驾驶领域。
这一波自动驾驶商业化的开端是2009年的谷歌自动驾驶项目,其最大特点是使用了Velodyne HDL-64E的64线机械激光雷达,在改装的丰田普锐斯上进行路测。
当时,激光雷达的价格堪比一辆豪华汽车,售价超过10万美元,而且体积巨大,顶在车顶像一口锅,64线的性能对空间的感知能力也有限。
值得一提的是,在禾赛成立的2014年,谷歌也因外购Velodyne激光雷达价格过高而开启了自研。当时激光雷达行业处于群雄逐鹿的状态,除了谷歌这样的甲方自研,还有Velodyne这样的车载激光雷达鼻祖,以及禾赛这样的初创团队。
经过超过10年的发展,禾赛在商业化上已成为全球激光雷达出货量最大的公司,在乘用车ADAS和Robotaxi两大市场的市占率均居全球第一;在技术上,也经历了激光雷达从机械到固态的芯片化发展全路径,构建了光机电软硬一体设计、自研芯片、超大规模精密制造的全栈能力,为Kosmo这种创新性地将激光雷达和摄像头融合的空间相机的诞生,打下了最牢固的技术基础。
三、Kosmo的商业规模究竟有多大?
对于Kosmo的商业化路径,禾赛目前设想的是三种商业模式:1、最底层的是卖硬件;2、其次是卖云服务;3、最后是卖数据资产。
这三种商业模式对应的是完全不同的三个市场。而且,硬件有硬件的市场规模,云服务有云服务的市场规模,数据资产有数据资产的市场规模。
其中,硬件和云服务是禾赛目前已经在做的商业模式。
至于数据资产,则是一个全新的市场。禾赛认为,这个市场至少需要3-5年才能建设起来。毕竟,数据资产首先需要各行各业的数据才能形成资产,而这需要一个个卖出的Kosmo One去采集,需要Kosmo World这个云平台进行一站式创作和管理。
禾赛对Kosmo的商业构想很大,但落地还是率先瞄准了当前最重要、也是行业最刚需的具身智能训练数据需求市场。
具身智能对数据的渴望,比大语言模型和图像模型更多、更立体。与大语言模型和图像模型可以通过互联网这一便捷渠道获取海量数据不同,目前具身智能行业的数据还需要行业自己去采集和生产,这也催生了具身智能数采中心这一新业态。
但在具身智能领域,训练数据存在**“数据假”、“交互假”、“空间不精准”**三大痛点需要解决。而KSC系统输出的3DGS、mesh和depth三种形态的数据,可以分别解决这三大痛点。其中,3DGS的细腻还原外观解决的是“画面假”,mesh加速可交互物体的拆分与建模解决的是“交互假”,depth提供的真实空间距离信息解决的是“空间不精准”。
3DGS、mesh、depth三大数据来自同一场景,且彼此时空对齐,让机器人看到的、抓到的和测到的是同一个世界。
在实际应用中,Kosmo生产的数据还可以针对目标机器人的相机特性进行视觉适配,让机器人在“自己眼中”的世界里训练,进一步缩小仿真环境与真实世界的差距。这套能力覆盖了具身智能从预训练、到后训练再到测评部署的全流程。
并且,已经在Sharpa机器人和DQ冰淇淋门店中完成了真实部署。过去人工建模还原一家门店,需要专业团队投入约300个小时,而Kosmo仅需约15分钟即可完成扫描并高度还原三维训练环境。Sharpa机器人迅速将任务成功率提升至99%,最终在DQ的门店上岗作业。
除了具身智能,现在爆火的世界模型——简单理解就是真实物理世界的模型——在这个领域,对真实数据的渴求更是海量。只有更多、更逼真的真实数据,才能训练出更好的世界模型,这已成为行业共识。
因此,真实世界数据成为整个行业最为刚需、也最为稀缺的基础需求。
Kosmo提供的1:1还原、几何精准的真实世界三维数据,连同精确的相机位姿、深度信息与多视角对应关系,成为世界模型理解物理规律的“真实坐标”。基于同一个三维空间,它还能自动生成上万条训练轨迹,使高质量真实世界数据的获取效率提升100倍以上。
这样一来,Kosmo有机会成为每一家世界模型公司背后的数据底座。为此,禾赛还致力于构建开放的空间智能生态,让真实世界数据连接AI与3D应用。在此,再剧透一下:禾赛的李一凡表示,手上还有好几个产品线尚未发布,都是与行业基础设施相关的。
除了上述新兴的具身智能和世界模型领域的应用,Kosmo还在影视媒体、文旅文博、空间商业化等领域拓展业务边界。
在空间商业化领域,Kosmo的作用是能够将目前导航到一家店的日常二维地图位置导航服务,提升到导航到一件商品(物品)具体位置的三维空间导航服务,帮助消费者迅速找到所需购买商品的具体位置。目前,禾赛已与高德达成战略合作,首批三维重建的重美术馆、偏锋画廊已上线高德扫街榜的“飞行街景”。
四、人手一台Kosmo的愿景实现路径
Kosmo在影视媒体的应用,更是让禾赛**“人手一台Kosmo”**的愿景走进现实最关键的一步。
在影视媒体领域,Kosmo生成的3D内容场景中的一草一木都是可互动、可编辑、可反复调用的3D数字资产,能够大幅降低目前影视行业在传统创作全流程中的成本和时间。
在前期预演阶段,勘景成本有望从前期预算的30%下降至5%,并且能让影片迅速进入UE等主流制作管线; 在拍摄阶段,可以直接服务于LED虚拟制作与绿幕流程。以往1万平米的欧洲街景实景搭建需要2个月,现在用Kosmo扫描、重建加编辑只需1周,成本节约最高可达80%; 在后期阶段,Kosmo拍摄扫描的内容中,一草一木、一人一狗等万物皆可互动、可编辑,光线可调,补拍可直接调用,大幅提升了影视制作的成本和便利性。
目前,Kosmo已获得包括制作过《玩具总动员》、《侏罗纪公园》等作品的皮克斯旗下工业级渲染器RenderMan在内的全球顶尖影视公司的采用。通过将Kosmo生成的3DGS数据直接接入RenderMan的渲染管道,可以在专业渲染软件中对真实世界数据实现影视级的风格化控制,并且能从真实空间中自由提取几乎一切元素作为创作素材。
近期,皮克斯更是将这一工作流做成官方教程,向全球创作者开源。RenderMan将Kosmo重建的真实世界带入全球顶级影视作品,Kosmo正在成为影视级3DGS的标准定义者。
在AI影视工业化方向,Kosmo与跃墨工作室合作,以真实空间替代AI生产的虚拟空间,在大幅节省Token消耗的同时提升运镜效果与画面表现力。创作团队从真实世界提取可考究的三维数据作为高光镜头的基底,结合AI完成人物导入与渲染,让成品既保有真实质感,也提升了AI影视的制作效率。
对于个人内容创作者来说,一旦拥有一台Kosmo,就能获得比肩制作顶级影视作品的能力,更重要的是,所花费的时间也将大幅缩减,这极具吸引力。
目前,横亘在个人消费者面前的有两个问题:
- Kosmo如香槟瓶般大小的体积;
- 相对大疆Pocket 3这种现象级手持相机高一到两个数量级的成本。
按照禾赛的设想,未来Kosmo能够成为放进每个人口袋的相机、人手一台的消费品。
这就需要禾赛的研发团队努力提升Kosmo的性能、降低Kosmo的生产成本。一旦做到,那么这个市场将是巨大的,个人内容创作也将迎来井喷式发展,或许会诞生新的交互方式、新的社交方式等。
记录、还原和展示真实世界的未来,非常值得期待。
从见证禾赛死磕车载激光雷达11年、打穿车载市场做到全球第一,到现在推出Kosmo这款打开未来的产品,标志着禾赛进入新的产品爆发周期。禾赛亲手创造了成立12年以来的全新爆发机会,拥有这样创造能力的禾赛,未来同样值得期待。
一旦实现,禾赛的市值也将再上一个台阶,或许是两个台阶。从目前的百亿级,上到千亿级,甚至更高。毕竟,禾赛的野心在于数据资产,数据资产的价值肯定很值钱,但目前谁也说不清它值多少钱。