8月4日消息,英伟达(NVIDIA)宣布,NVIDIA XR AI现已开启公开测试。 据介绍,NVIDIA XR AI能够连接XR设备采集的现实环境数据、AI模型、企业知识库、应用工具以及加速计算资源,使AI Agent具备感知环境、分析任务并提供辅助的能力。 英伟达表示,该平台可帮助开发者更便捷地整合多模态感知、企业知识检索、推理模型以及AI Agent运行流程,为企业级XR应用开发提供基础支持。 该平台融合了四项核心功能: · 现实环境数据接入:支持AR/XR设备采集的视频、音频、深度信息、姿态数据以及其他传感器数据; · 视觉AI与知识检索能力:集成NVIDIA Metropolis视觉AI技术、VSS视频理解能力,以及NVIDIA NeMo Retriever企业知识检索技术; · AI模型支持:支持NVIDIA Nemotron推理模型、NVIDIA Cosmos Reason以及其他兼容的基础模型; · AI Agent运行与管理能力:提供帮助开发者开发、测试并部署XR应用的工具。 此外,NVIDIA XR AI支持AI Agent调用外部工具、执行推理流程,并可部署于云端、数据中心及边缘计算环境。 英伟达表示,通过结合环境感知、AI推理和企业数据能力,XR设备能够进一步成为连接物理世界与AI服务的新型交互入口,为用户提供更具场景化的信息辅助。 目前,NVIDIA XR AI已被多家企业和研究机构用于探索工业制造、科学研究、医疗等领域应用。 在工业领域,西门子正在探索利用NVIDIA XR AI与NVIDIA DGX Spark,为工厂工程师提供设备维护和故障排查辅助。通过佩戴轻量化智能眼镜,工程师可以向AI Agent询问设备问题,并获取实时指导,同时结合工业系统、数字孪生以及自动化流程,提高现场维护效率。 生物科技公司Rana正在基于NVIDIA XR AI推出LabOS系统,将空间智能能力引入科研实验流程。该系统可为研究人员提供实时、免手操作的实验指导,帮助识别实验样本、选择CRISPR基因编辑工具,并记录实验过程,提高科研流程的标准化和可追溯性。 VITURE 已将 NVIDIA XR AI 集成到可穿戴界面中 据了解,LabOS支持Meta、Rokid和VITURE等品牌的智能眼镜设备。同时,VITURE也已将NVIDIA XR AI集成至其可穿戴设备中,为用户提供基于场景的信息提示和任务辅助。 美国匹兹堡大学医学中心的Surreality Lab展示了一套基于NVIDIA XR AI和NVIDIA DGX Station运行的系统。该系统旨在帮助医疗团队快速获取相关信息,并辅助医生完成注意力引导。 在汽车设计领域,Innoactive利用NVIDIA DGX Spark展示了XR技术在设计评审、产品展示以及数字孪生等场景中的应用。 此外,Atlantic Studios利用NVIDIA XR AI打造了泰坦尼克号沉浸式探索体验,用户可通过语音交互探索沉船环境,并获取相关位置的信息。 来源:auganix 艾邦建有AR/VR产业链微信群,目前有HTC、PICO、OPPO、亮亮视野、光粒科技、影创、创维、佳视、歌尔、立讯精密、多哚(纳立多)、欣旺达、耐德佳,联创电子、至格科技、灵犀微光、舜宇光学、广景视睿、珑璟光电、京东方、海信视像、科煦智能、阿科玛、金发科技、思立可、新安天玉、四方超轻、大族激光、发那科、承熹机电等加入,也欢迎大家长按下方图片识别二维码加入微信群: 资料下载: AR VR显示技术报告 2022年ARVR推出的新品总结20221103 2022年5月27日AR/VR产业链论坛演讲PPT AR 光波导显示方案企业介绍 国内45家AR/VR/MR头显品牌企业盘点 AR/VR/元宇宙ODM/OEM代工16强 AR/VR高分子材料供应商介绍20强 AR/VR材料介绍PPT 欢迎您点击此处加入AR/VR通讯录,目前已经有3000多人加入,如歌尔、HTC、OPPO、创维、PICO、字节跳动、黑鲨、联想、耐德佳、灵犀微光、立讯、领益智造、欧菲光、华勤、闻泰、立讯、珑璟光电、舜宇、深圳虚拟现实等,点击下方关键词可以筛选 品牌 代工 AR AR眼镜 VR ODM及方案 外观件 外观设计 内容 AR导航 游戏 交互 光学元件 智能终端 光波导 人脸识别 摄像头 眼动追踪 天线 软件 五金 语音识别 显示屏 光学镜头 塑胶件 文章导航 广纳四维碳化硅全彩波导方案再落地,49克全彩碳化硅AI眼镜Nimbo X1即将众筹