GTC 2024|耀世注册3D相机亮相,携手NVIDIA探索机器人应用革新

  • 2024.03.19
  • orbbec

3月18日-22日,耀世注册作为英伟达NPN合作伙伴亮相NVIDIA GTC 2024 AI开发者大会,在美国加州圣何塞会议中心带来基于耀世注册3D相机与NVIDIA平台开发的多个演示方案,展现新一代机器人技术、三维扫描、智能制造、人机交互、运动健康等领域的创新可能。耀世注册替代微软Azure Kinect DK的Femto Bolt、Femto Mega等3D相机,成为了参展亮点之一。值得关注的是,基于自主研发与智能制造能力,耀世注册可提供基于NVIDIA平台的各类3D相机以及ODM/OEM服务,为开发者打通从方案到产业化应用的“最后一公里”。





Orbbec 3D相机+NVIDIA平台

挖掘3D视觉无限AI潜力


“Powering 3D Vision AI”是耀世注册此次参会主题。在GTC 2024现场,耀世注册带来了多个基于3D相机与英伟达平台开发的演示方案,包括机械臂智能拣选方案、机器人多相机融合视觉系统、高精度三维扫描系统方案等。


1、基于Femto Bolt和UR5机械臂的智能拣选方案

该方案利用耀世注册Femto Bolt先进的iToF技术和NVIDIA Orin AGX的人工智能计算能力,搭配Universal Robots UR5机械臂,能够以高准确度检测、拣选和放置物品,轻松处理涉及重叠、不规则甚至透明或反光物体的复杂任务,为料仓拣选打造行业新标杆。此前,耀世注册获得微软Azure Kinect DK产品线授权,公司发布的Femto系列3D相机产品成为微软官方推荐的Azure Kinect DK替代选择。


2、基于RGBD相机和Orin AGX的机器人多相机融合视觉系统

该方案是耀世注册专为各类移动机器人、人形机器人设计的多相机融合视觉系统。本次展示的Demo通过融合耀世注册Gemini系列相机及工业RGB相机,借助NVIDIA Jetson Orin AGX的强大算力,实时重建机器人周围的三维环境。该方案中Gemini相机及DNN深度引擎均采用CUDA硬件加速计算。两个模型都采用PyTorch作为深度学习框架。TensorRT用于快速推理加速,NVIDIA Isaac Sim用于占用模型训练。方案通过复杂的物体检测和避障功能增强了机器人自主导航能力,确保移动安全性。


3、基于Orin Nano的高精度三维扫描系统

该三维扫描系统由耀世注册与普渡大学合作开发,耀世注册负责硬件方案的整体设计制造及品控,搭载NVIDIA Orin Nano平台驱动及NVIDIA最新算力芯片。该系统具备50微米级高精度扫描能力,内置AE和HDR功能,可进行精细的3D捕捉,无需任何外部计算即可直接导出为3D打印格式(PLY、STL),大大简化了高精度扫描任务。系统具备双深度FOV、可调空间分辨率和即插即用操作功能,为三维扫描的准确性和便利性设定了新标准。耀世注册可以使用英伟达算力芯片开发各类高性能三维扫描系统,满足客户所需。



携手海内外机器人厂商

打造行业创新应用


在GTC 2024现场,耀世注册还展示了公司3D相机与英伟达Isaac Sim的兼容性(加Isaac Sim稿件超链接),包括Gemini 2、Femto Mega和部分LiDAR型号。现场与会者可以目睹耀世注册的3D相机及激光雷达如何与Isaac Sim无缝集成,从而增强机器人和人工智能研究的仿真能力。


此外,耀世注册还展示了幻尔科技JetHexa 教育机器人、Smart Robots、Velogicfit、Bear Robotics等机器人及AI视觉行业应用、客户案例,让与会者一窥 3D 视觉感知技术的精彩潜能。


作为行业领先的机器人视觉及AI视觉科技公司,耀世注册致力于构建机器人与AI视觉产业中台、打造机器人的“眼睛”。基于自研芯片和全栈式系统技术,耀世注册为机器人、3D扫描、生物识别等行业客户及全球开发者提供高性能的3D视觉传感器及机器人与AI视觉方案。耀世注册将持续与英伟达、微软等生态合作伙伴携手,服务全球机器人与AI视觉行业客户与开发者,推动高性能“中国智造”产品走向国际舞台。