近日,XR空间计算芯片制造商「耀宇视芯」完成数千万元A轮融资,本轮投资由国晨创投领投(国晨为达晨财智旗下基金),跟投方包括亿泓投资(亿道信息子公司)、Rokid、敦鸿资产及老股东星纳赫。融资资金将主要用于一代芯片的量产,以及二代芯片的前期投入,涵盖IP采购与算法设计。
耀宇视芯成立于2022年,是一家空间计算芯片制造商,主要从事空间交互计算算法及芯片研发、设计业务,产品可广泛应用于VR/AR眼镜、汽车AR-HUD、无人机、机器人等硬科技产品。2023年10月,耀宇视芯率先推出自主研发的VR/AR协处理芯片“启明”A1088,开启国产空间计算新征程。
A轮融资的落地,标志着耀宇视芯以算法为核心的一系列空间解决方案在市场上得到了初步验证,基本商业模式与运营框架形成,得到「产业投资方」与「财务投资方」认可。
对于本轮融资,耀宇视芯创始人兼CEO杜逢博表示:“一方面,A1088是目前市面上唯一可以批量出货的低功耗低延迟XR协处理芯片,在市场上较为独特;另一方面,整个行业都在向协处理器计算方向发展,VR/AR、AR-HUD、机器人、无人机等领域都有着大量需求和落地场景。”
XR协处理器成标配
耀宇视芯A1088订单已达数十万片
从2023年苹果发布的MR头显Vision Pro(搭载 R1 协处理芯片),到2024年Meta展示的AR眼镜Orion(2-3颗定制芯片),XR协处理芯片已然成为头戴式设备不可或缺的关键组成部分。
这一市场趋势下,耀宇视芯凭借A1088,成功在市场中占据了一席之地。据悉,耀宇视芯一代芯片A1088已经吸引了超过二十家意向客户,订单量呈现出迅猛增长的态势,达到数十万片。仅在AR方向,按现有订单统计,A1088芯片预计出货20万片。
在AR这条前沿、小众的赛道上,20万片是一个惊人的数字,毕竟2023年全球AR眼镜的出货量也才50万台(IDC数据)。
此外,从目前的市场来看,AR眼镜搭载摄像头做SLAM算法的产品屈指可数,更多的AR眼镜形态偏向于纯观影游戏,又或者信息提示。一方面受限于产品定位,需要综合考虑设备体积功耗;另一方面也受限于算法技术成熟度。VR/MR方面,虽然6DoF空间定位已是标配,但各家算法精度却存在参差不齐,初创公司产品与大厂之间存在明显差距。
A1088小尺寸设计更贴合智能眼镜轻薄化趋势
而A1088的出现,正是为了解决这一系列问题。杜逢博表示:“一代芯片主要解决的是「空间定位」以及「多摄像头接入」问题,不管是VR/MR头显,还是AR眼镜,底层都需要6DoF空间定位,背后主要是光学方案的不同,匹配的渲染算法会有一些区别,但我们都有一整套的方案。”
相对于传统主XR计算芯片的算法逻辑,耀宇视芯的A1088协处理器可以显著提升VR/AR设备空间定位能力,同时降低研发成本与算法功耗,杜逢博解释道,具体来看:
高精度:相对于传统XR计算芯片的算法逻辑,基于A1088协处理器,首先带来的是一个高精度、低延迟的6DoF定位能力。基于耀宇视芯第一代芯片,通过与瑞芯微、联发科等平台合作,可以实现接近于Meta Quest 3同等级别的算法效果。
降功耗:第二点是大幅度降低功耗,当在主控上使用软件算法运行时,高通的DSP大概在800mW-1W之间。如果采用瑞芯微、联发科芯片,基于CPU进行运算,功耗起步为2-3W,而A1088仅需100mW即可完成这些复杂的运算处理。
A1088 单目/双目vSLAM 典型功耗
降成本:使用A1088后,可以有效降低研发门槛,厂商无需自行开发算法,直接集成计算芯片就能实现相关功能。在成本方面,分体式 AR 眼镜物料成本并未显著增加,因为原本厂商就需要一颗摄像头接口芯片,而A1088只是取代了它,而对于一体机,A1088 解放了主芯片,从而各个厂商可以根据自身应用场景的需要,选择不同价位、不同性能的主芯片,合理地控制成本。
杜逢博透露,预计最快下月,我们就可以看到采用A1088的相关AR眼镜产品。伴随着接下来AR眼镜市场的进一步扩大,有望在明后年看到更多搭载摄像头的AR眼镜产品。
芯片级SLAM算法
成功辐射「AR-HUD、无人机、机器人」
芯片级SLAM算法,不仅是高性能VR/AR硬件的交互核心,基于底层计算机视觉技术,也有着强大的跨领域拓展能力,可辐射汽车AR - HUD、无人机、机器人等产品。
在新能源汽车领域,AR-HUD(增强现实抬头显示)正逐渐成为提升驾驶体验和安全性的关键技术。去年12月,鸿蒙智行问界M9正式发布,其虚实结合的全新AR-HUD技术在高端SUV的新智驾体验上实现了新的高度。自今年4月开启规模交付以来,问界M9持续蝉联50万以上月度销冠。
相对于基础的W-HUD(风挡式抬头显示),AR-HUD能够将虚拟信息与现实世界相结合。例如,问界M9支持将智能驾驶的意图显示到AR-HUD 上,与物理世界贴合,方便驾驶员更加及时精准地掌握智驾状态和意图。
事实上,AR-HUD与AR眼镜在光学、SLAM算法方面有着诸多重叠,许多技术都可以相互借鉴和应用,包括XR协处理芯片。据杜逢博透露,耀宇视芯目前已经和部分头部新能源汽车厂商达成合作,帮助其在高端汽车上,实现空间感知和定位能力。
在AR-HUD的技术趋势下,杜逢博认为汽车上使用协处理未来也将成为第一大趋势,其表示:“汽车上使用XR协处理器是一个趋势。目前高通车机芯片资源紧张,而联发科芯片在处理CV算法上的资源较少,所以采用协处理器可以有效解决资源压力,提高算力,并且能够支持多个摄像头传感器的数据处理。并且,汽车本身具有GPS和车轮等多传感器融合的优势,大范围精度比AR眼镜更高。”
依赖计算机视觉技术、SLAM算法的无人机与机器人也有诸多应用场景需要XR协处理器。例如,在消费级拍照无人机在飞行过程中,使其更加精准地感知周围环境,实现自主避障、精准悬停和智能跟随等高级功能。
“我们正在与一家无人机方案商合作,为他们提供芯片,以实现特定功能。比如,当一架无人机飞远信号丢失后,利用计算机视觉技术,能够精确地自行返回。无人机与AR眼镜一样,对体积、功耗和重量都比较敏感,所以A1088是一个很好的解决方案。”杜逢博说道。
根据中国航空运输协会发布的2023—2024年度《中国无人机发展报告》(以下简称《报告》),2023年我国交付民用无人机超317万架,民用无人机产业规模达到1174.3亿元,同比增长32%。杜逢博透露无人机领域未来会是耀宇视芯的一个重要拓展领域,意向客户明年给到的需求达到了50万片。
下一代12nm协处理芯片
拓展MR头显(VST)与AI眼镜(ISP)
一代芯片开疆拓土的同时,耀宇视芯二代芯片已进入预研阶段,目前算法设计进度已完成70%。二代芯片将提高半导体性能,采用12nm制程工艺,进一步降低功耗,且保持成本优势。
半导体工艺的迭代外,耀宇视芯二代XR协处理芯片也将开拓更多应用场景,杜逢博表示:“基于VST(视频透视)的特性,本身就需要融合ISP芯片(图像信号处理),所以,耀宇视芯最终会将二代芯片进行拆分组合,以分别适配AI眼镜,以及MR头显。”
对于VR/MR头显来说,全彩VST功能是实现混合现实体验的关键。耀宇视芯的二代芯片可以为MR头显提供高精度的空间定位,以及低延迟的全彩VST效果,达到单眼4K 90fps水准,进一步提高混合现实特性。
然而,值得注意的是,目前VR/MR市场几乎以巨头垄断市场为主,不管是苹果、Meta,还是国内的PICO,耀宇为何能有信心切入?
对此,杜逢博表示:“我们需要从产品定义的角度出发来考虑这个问题。首先,Meta采用纯软件算法实现,其效果实际上不如苹果,尤其是在延迟方面的表现。Meta Quest 3全彩VST在近距离物体变形上一直是一个问题,未能得到妥善解决。”
“部分原因在于其延迟大于苹果(Apple Vision Pro),导致其需要更多且更精确的补偿。因此,延迟问题并不于「软」,它是一个物理上的问题,需要借助协处理器来解决。我相信Meta肯定自己在解决这个问题,而其他公司也在努力改进。耀宇针对这款协处理器的产品定义和技术开发进行了多年深入研究,团队积累了行业领先的算法和芯片设计能力,我们有信心基于行业稀缺的软硬件综合解决方案能力为行业客户填补这个产业链空白。”
Quest 3全彩VST效果
AI眼镜方面,年初Ray-Ban Meta突破百万台销量,供不应求的消息在行业引起一片躁动,潜在的市场需求正反向拉动供应链技术的进步,而耀宇视芯也将是其中的一环。
杜逢博说道:“Ray-Ban Meta爆火的那段时间,我的微信都被刷屏了,确实有很多客户来咨询。但一代芯片在某些功能上无法完全满足目前AI眼镜的需求。对于AI眼镜来说,其面临的痛点是需要一颗功耗极低、支持高分辨率摄像头拍照录视频的芯片,以满足其对摄像的高要求。”
“基于此,耀宇视芯的二代芯片针对这一需求,进行了专门的优化和设计,同时提高了对高分辨率摄像头的支持能力。例如,普通的手表处理器可能最大分辨率支持为1080P,而耀宇视芯的二代芯片可以支持更高分辨率的摄像头,达到与Ray-Ban Meta一样的4K分辨率,为AI眼镜提供更加清晰、细腻的图像质量。”
从MR头显到AI眼镜,二代芯片围绕当前XR硬件技术痛点,市场需求出发,有望进一步提升用户体验,推动市场增长。
投资人点评
国晨创投投资总监陈伟杰表示:“XR一直是达晨财智、国晨创投长期关注的领域,Apple Vision Pro的出现推动了行业发展。耀宇视芯本质是一家空间计算方案提供商,芯片使其核心算法能够产品化,可应用于各类虚实融合场景。耀宇视芯的协处理芯片能够助力初创公司更快速地实现空间定位算法的落地,助力他们快速进入XR设备制造领域。同时耀宇视芯具备很强的市场适应性,算法和芯片还可应用于AR-HUD和人形机器人等领域,能够不断挖掘新的应用场景,为自身发展创造更多机会。”
敦鸿资产合伙人郑华良表示:“在XR行业上游供应链中,耀宇视芯在协处理芯片领域表现出色,算法和芯片方面具有优势,且拿到了大部分XR玩家的意向订单,有望打破以往XR芯片细分环节的垄断局面,其产品的稀缺性和应用的广泛性成为了本次投资的重要考量因素。敦鸿资产坚信XR时代终将到来,这是人类信息社会发展的必然趋势,尽管过程不会很快,但行业整体在增长,技术和产品体验也在逐步提升。在此过程中,未来轻量级AR眼镜是趋势,需要协处理器芯片来提升性能,如SLAM算法和实时显示渲染技术,以满足用户在交互、视觉体验等方面的高要求。”
Rokid AR平台总工程师马超表示:“Rokid的市场战略不仅限于巩固自身在AR领域的地位,还在积极推动整个行业生态的建设,希望为用户提供一个更好的AR产品。耀宇视芯在核心技术的积累上具有巨大的潜力,特别是在空间计算相关算法、算法协处理器芯片设计方面有独到的解决方案。Rokid通过投资,能够帮助双方加速技术的落地,并为未来更多元化的产品线打下基础。虽然AR市场目前体量有限,但其增长潜力巨大,投资像耀宇视芯这样的初创公司,能为Rokid带来长期的战略优势。”
亿道信息董事、亿境虚拟总经理石庆表示:“耀宇视芯的解决方案在功耗处理、算法精度、低延迟等方面具有天然优势,可实现轻6DoF,且能较好平衡成本。从产业投资角度看,公司较为务实且专业,具备强大的市场发展潜力,未来与亿道信息在VR/AR、AI眼镜产品上可以深度联动。亿道信息长期看好无线分体式AR眼镜的发展,例如像Meta Orion等。分体式AR眼镜在体积、重量、续航等方面可能更具灵活性,能够提升用户的佩戴体验,而协处理芯片将赋能无线分体式AR眼镜,及时处理来自摄像头、传感器等设备的大量数据,提供更好的混合现实体验。”
原文始发于微信公众号(耀宇视芯 MESIONTECH):XR芯片制造商「耀宇视芯」完成A轮融资,订单量已达数十万片