8月4日消息,英伟达(NVIDIA)宣布,NVIDIA XR AI现已开启公开测试。
据介绍,NVIDIA XR AI能够连接XR设备采集的现实环境数据、AI模型、企业知识库、应用工具以及加速计算资源,使AI Agent具备感知环境、分析任务并提供辅助的能力。
英伟达表示,该平台可帮助开发者更便捷地整合多模态感知、企业知识检索、推理模型以及AI Agent运行流程,为企业级XR应用开发提供基础支持。
该平台融合了四项核心功能:
· 现实环境数据接入:支持AR/XR设备采集的视频、音频、深度信息、姿态数据以及其他传感器数据;
· 视觉AI与知识检索能力:集成NVIDIA Metropolis视觉AI技术、VSS视频理解能力,以及NVIDIA NeMo Retriever企业知识检索技术;
· AI模型支持:支持NVIDIA Nemotron推理模型、NVIDIA Cosmos Reason以及其他兼容的基础模型;
· AI Agent运行与管理能力:提供帮助开发者开发、测试并部署XR应用的工具。
此外,NVIDIA XR AI支持AI Agent调用外部工具、执行推理流程,并可部署于云端、数据中心及边缘计算环境。
英伟达表示,通过结合环境感知、AI推理和企业数据能力,XR设备能够进一步成为连接物理世界与AI服务的新型交互入口,为用户提供更具场景化的信息辅助。
目前,NVIDIA XR AI已被多家企业和研究机构用于探索工业制造、科学研究、医疗等领域应用。
在工业领域,西门子正在探索利用NVIDIA XR AI与NVIDIA DGX Spark,为工厂工程师提供设备维护和故障排查辅助。通过佩戴轻量化智能眼镜,工程师可以向AI Agent询问设备问题,并获取实时指导,同时结合工业系统、数字孪生以及自动化流程,提高现场维护效率。
生物科技公司Rana正在基于NVIDIA XR AI推出LabOS系统,将空间智能能力引入科研实验流程。该系统可为研究人员提供实时、免手操作的实验指导,帮助识别实验样本、选择CRISPR基因编辑工具,并记录实验过程,提高科研流程的标准化和可追溯性。
VITURE 已将 NVIDIA XR AI 集成到可穿戴界面中
据了解,LabOS支持Meta、Rokid和VITURE等品牌的智能眼镜设备。同时,VITURE也已将NVIDIA XR AI集成至其可穿戴设备中,为用户提供基于场景的信息提示和任务辅助。
美国匹兹堡大学医学中心的Surreality Lab展示了一套基于NVIDIA XR AI和NVIDIA DGX Station运行的系统。该系统旨在帮助医疗团队快速获取相关信息,并辅助医生完成注意力引导。
在汽车设计领域,Innoactive利用NVIDIA DGX Spark展示了XR技术在设计评审、产品展示以及数字孪生等场景中的应用。
此外,Atlantic Studios利用NVIDIA XR AI打造了泰坦尼克号沉浸式探索体验,用户可通过语音交互探索沉船环境,并获取相关位置的信息。
来源:auganix

艾邦建有AR/VR产业链微信群,目前有HTC、PICO、OPPO、亮亮视野、光粒科技、影创、创维、佳视、歌尔、立讯精密、多哚(纳立多)、欣旺达、耐德佳,联创电子、至格科技、灵犀微光、舜宇光学、广景视睿、珑璟光电、京东方、海信视像、科煦智能、阿科玛、金发科技、思立可、新安天玉、四方超轻、大族激光、发那科、承熹机电等加入,也欢迎大家长按下方图片识别二维码加入微信群:
资料下载:
欢迎您点击此处加入AR/VR通讯录,目前已经有3000多人加入,如歌尔、HTC、OPPO、创维、PICO、字节跳动、黑鲨、联想、耐德佳、灵犀微光、立讯、领益智造、欧菲光、华勤、闻泰、立讯、珑璟光电、舜宇、深圳虚拟现实等,点击下方关键词可以筛选

作者 sun, keting