衍象是一款基于数字孪生的物理仿真平台适用于物理准确工艺仿真具身智能仿真训练数据采集利用物理准确高质量三维仿真资产模型通过仿真环境的高度集成,构建物理世界1:1映射孪生场景满足工艺过程具身智能训练虚拟交互不同领域仿真可视化需求

1.面向工艺过程仿真Synthesis支持导入100+格式三维资产工程模型实景模型通过在线场景编辑器快速搭建数字孪生场景借助内置蓝图编辑器用户可以通过可视化编程方式接入业务数据设定过程控制逻辑全程"0"代码完成数据接入逻辑控制场景响应通过Multiverse数字孪生引擎实现高质量渲染物理交互

2.面向具身智能仿真训练Synthesis平台着重关注仿真训练中高质量三维数据稀缺、构建训练环境复杂,GPU利用效率低,数据采集存储安全问题突出等共性需求支持用户导入自有三维资产模型同时预置提供大量包含丰富语义标注真实工程模型、 Sim Ready 铰链资3D高斯实景通过在线场景搭建工具基于LLM泛化材质灯光位置实现仿真训练场景快速创建场景数据通过USDMJCF格式转换Isaac simMujoco仿真器无缝集成尤其针对Isaac sim通过云端WebRTC推流实现Isaac sim集群采集人员只需要借助Web浏览器客户机进行云端进行渲染数据采集存储构建一个真正意义具身智能仿真训练场提供云端方案同时我们Synthesis资源库开发OmniverseIsaac sim插件用户可以OmniverseIsaac sim访问官方资源库一样直接访问加载Sythesis三维资产模型场景

一、广泛的三维格式支持

通过自主开发ConnectorSynthesis平台支持市面大部分主流三维软件三维格式解析轻量化结构化以及USD格式转换可以实现既有质量工程三维模型数据利用同时借助Multiverse引擎进行超大体量三维模型极速加载浏览操作实现高精度逼真可用统一

、高质量三维资产库与模型库

平台内置大量1:1实物重建高保真资产大部分资产包含铰链覆盖刚体软体,实际工程三维模型、3D高斯泼溅实景模型以及利用这些资产模型搭建1:1映射真实场景全交互物理仿真场景,所有资产均严格按照实物重建确保仿真场景真实物理世界严格一致符合建筑标准规范。资产保证实物级几何精度同时全面使用PBR材质保证仿真真实视觉一致性物理层面通过详细物理参数碰撞体以及关节动力学参数设定确保仿真真实物理特性一致除此之外语义标注数据组织坐标设定方面采用统一标准确保所有资产良好适用于物理仿真

Synthesis提供在线浏览工具Web浏览即可浏览三维资产建筑3D高斯泼溅模型支持属性语义关节信息查看

资产模型实景支持在线转换OpenUSD格式方便Isaac sim集成

部分Sim Ready建筑模型全交互场景已经遵照CC BY-NC 4.0开源协议开源可以Synthesis直接下载使用

、场景搭建与泛化

Synthesis平台提供在线场景搭建工具与基于LLM的泛化,支持Web浏览器通过拖拉拽方式Sim Ready建筑模型3D高斯模型添加到场景进行位置调整从而快速构建符合真实世界正确交互场景借助Synthesis泛化功能可通过灯光、天气、材质资产位置合理调整快速泛化大量真实正确的可用场景

云端仿真集群

基于NVIDIA Isaac SimWebRTC推流方案深度定制构建Isaac sim集群可以部署公有云私有云环境中Synthesis平台监控每个Isaac sim运行状态动态调度仿真数据采集人员无需独占GPU或者工作站通过浏览器即可实现仿真场景加载仿真交互数据采集操作大幅度降低硬件成本提升硬件利用率

云端仿真数据采集存储

通过Synthesis Asset Explorer插件或者SynthesisWebRTV推流集群方案可以OmniverseIsaac sim快速加载云端资产模型场景同时通过定制通信组件可以实现传感器数据IOT数据低延迟广播仿真集群每个实例从而实现本地操作云端仿真采集存储终端操作仿真环境同步采集充分利用GPU资源保证数据安全同时大幅度提升仿真数据采集效率

Isaac sim扩展插件

为了更方便的使用Synthesis平台的资产,我们针对Omniverse和Isaac sim开发并开源了Synthesis Asset Explorer插件(https://github.com/Extwin-Synthesis/Synthesis-Assets-Explorer),利用这个插件,您可以像访问Nvidia官方资源库一样访问Synthesis上的高质量USD资产。

Logo

DAMO开发者矩阵,由阿里巴巴达摩院和中国互联网协会联合发起,致力于探讨最前沿的技术趋势与应用成果,搭建高质量的交流与分享平台,推动技术创新与产业应用链接,围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐