Nvidia Isaac Sim 入门教程 2024(2)安装与配置

2024-06-19 02:44

本文主要是介绍Nvidia Isaac Sim 入门教程 2024(2)安装与配置,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

Isaac Sim 安装与环境配置

版权信息

Copyright 2023-2024 Herman Ye@Auromix. All rights reserved.This course and all of its associated content, including but not limited to text, 
images, videos, and any other materials, are protected by copyright law. 
The author holds all rights to this course and its contents.Any unauthorized use, reproduction, distribution, or modification of this course 
or its contents is strictly prohibited and may result in legal action. 
This includes, but is not limited to:
Copying or distributing course materials without express written permission.
Reposting, sharing, or distributing course content on any platform without proper attribution and permission.
Creating derivative works based on this course without permission.
Permissions and InquiriesIf you wish to use or reproduce any part of this course for purposes other than personal learning, 
please contact the author to request permission.The course content is provided for educational purposes, and the author makes no warranties or representations 
regarding the accuracy, completeness, or suitability of the course content for any specific purpose. 
The author shall not be held liable for any damages, losses, 
or other consequences resulting from the use or misuse of this course.Please be aware that this course may contain materials or images obtained from third-party sources. 
The author and course creator diligently endeavor to ensure that these materials 
are used in full compliance with copyright and fair use regulations. 
If you have concerns about any specific content in this regard, 
please contact the author for clarification or resolution.By enrolling in this course, you agree to abide by the terms and conditions outlined in this copyright notice.

如需企业内训、项目开发或个人学习支持与定制,请联系:hermanye233@icloud.com

学习目标

  • 熟悉Isaac Sim的安装
  • 熟悉Isaac Sim的环境配置

难度级别

初级中级高级

预计耗时

30 mins

学习前提

对象类型状态
Isaac Sim基本概念知识已了解
Ubuntu22.04操作系统软件已确认

NVIDIA Omniverse™ Isaac SimNVIDIA Omniverse™平台的一款机器人仿真工具包。Isaac Sim具备构建虚拟机器人世界和实验的关键功能。它为研究人员和从业人员提供了创建健壮、物理精确仿真和合成数据集所需的工具和工作流程。Isaac Sim通过ROS/ROS2支持导航和操控应用。它可以模拟RGB-D、Lidar和IMU等传感器的传感器数据,用于多种计算机视觉技术,如领域随机化、真值标签、分割和边界框。

1.检查配置

Isaac Sim推荐的表现较好的配置为:

CPU内存存储显卡显存显卡驱动
Intel Core i9系列 16核64GB1TB+GeForce RTX 4080/RTX Ada 600016GB/48GB535.129.03
  • 检查工作站配置是否满足Isaac Sim的硬件性能要求。
  • 检查显卡驱动是否满足Isaac Sim的显卡驱动要求。

提示: 配置步骤为工作站、个人电脑的配置方式,对于云端或Docker部署,可参考本章的云端部署部分或Isaac官方关于Docker的部署说明。

如果不确定环境是否适配,可以尝试继续进行下一步骤,在下一步骤中我们将通过工具对配置进行检查。

2.配置Omniverse环境

  • 下载omniverse launcher
    Isaac Sim是依托于NVIDIA Omniverse平台的仿真工具包,因此需要先安装Omniverse启动器来安装Isaac Sim GUI。
# Install fuse
sudo apt install fuse -y  
# Install wget
sudo apt install wget -y
# Download Omniverse Launcher
wget https://install.launcher.omniverse.nvidia.com/installers/omniverse-launcher-linux.AppImage
  • 运行Omniverse Launcher
# Granting execution permission
sudo chmod +x omniverse-launcher-linux.AppImage
# Run Omniverse Launcher
./omniverse-launcher-linux.AppImage
  • 登录Nvidia账号
    登录你的Nvidia账号,按照引导,持续选择默认即可,进入Omniverse主页面
    在这里插入图片描述
  • 同意相关协议
    在这里插入图片描述
    在这里插入图片描述
  • 设置路径(按照默认即可)
路径英文作用
库路径library path此位置指定在Omniverse启动器里安装的应用程序、连接器和工具的安装位置,比如Isaac Sim。
数据路径data path数据路径是Omniverse Nucleus服务器(local版本)存储所有内容的位置。
资源路径content path资源路径是Omniverse下载一些资产到本地时默认的下载位置。
缓存路径cache path缓存数据库(Omniverse Cache)用于存储其缓存文件的位置(如果要安装Omniverse Cache的话)。

在这里插入图片描述

  • 下载Omniverse Nucleus Navigator
    在 EXCHANGE目录下搜索NUCLEUS NAVIGATOR 进行下载。

Omniverse Isaac Sim使用NVIDIA Omniverse™ Nucleus来访问环境和机器人的USD文件等内容。Omniverse Nucleus服务允许各种客户端应用程序、渲染器和微服务在Omniverse Isaac Sim中共享和修改虚拟世界的表示。

Nucleus采用发布/订阅模型。在访问控制的前提下,Omniverse客户端可以将数字资产和虚拟世界的修改发布Nucleus数据库(DB),或订阅其变化。更改在连接的应用程序之间实时传输。数字资产可以包括描述虚拟世界及其随时间演变的几何形状、灯光、材料、纹理和其他数据。

这使得各种Omniverse-enabled客户端应用程序(Apps, Connectors等)能够共享和修改虚拟世界的权威表示。

简而言之,NUCLEUS可以被简单理解为一个管理虚拟资产的文件管理器

在这里插入图片描述

  • 配置Nucleus
    依次点击Library-> Nucleus Navigator ->LAUNCH启动Nucleus导航工具
    在这里插入图片描述

依次点击Create Local Server->NEXT,随后填入个人信息,完成本地服务器的初始设置
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
此时,本地Nucleus服务器就创建好了,Isaac Sim将默认从Nucleus服务器读取资产。
在这里插入图片描述

  • 下载Omniverse Cache(可选的)
    在 EXCHANGE目录下搜索CACHE 进行下载。
    在这里插入图片描述

注意: 根据Richard3D(Omniverse Community Manager)在2024年5月的社区回复,现在的Omniverse App都内置了Cache,因此它可以是不被需要的。

  • 再次检查工作站配置
    在 EXCHANGE目录下搜索ISAAC SIM COMPATIBILITY CHECKER 进行下载。
    利用ISAAC SIM COMPATIBILITY CHECKER 工具进行工作站环境检测。

在这里插入图片描述
依次点击Library-> Isaac Sim Compatibility Checker ->LAUNCH启动Isaac Sim兼容性检查工具。
在这里插入图片描述
兼容性工具将通过颜色提示哪些硬件性能是不足的。
在这里插入图片描述

注意: 如果这个兼容性检查工具打不开也没关系,可以跳过该步骤。

3.配置Isaac Sim环境

  • 安装ISAAC SIM
    进入OmniverseEXCHANGE页面,选择ISAAC SIM,选择对应的版本,点击install,等待自动下载安装完成。
    在这里插入图片描述

注意:在本教程中所使用的是4.0.0版本,该版本在2024年6月为最新版本。

  • 配置命令行omni python别名

设置Isaac Sim所使用的python的环境变量,Isaac Sim的根文件夹位于~/.local/share/ov/pkg/isaac-sim-4.0.0,复制以执行以下由Auromix提供的便捷脚本进行Isaac Sim的命令行环境配置,以便你可以通过omni_python别名来运行python程序。

script_name="config_isaac_sim_environment.sh" && directory_name="/tmp" && download_url="https://raw.githubusercontent.com/Auromix/auro_sim/main/scripts" && full_script_path="${directory_name}/${script_name}" && wget -O $full_script_path $download_url/$script_name && sudo chmod +x $full_script_path && clear && bash $full_script_path && rm -rf $full_script_path
  • 安装资产包(可选的)
    为方便本地使用USD资产素材,在Omniverse->EXCHANGE中搜索isaac sim assets pack,下载4个资产包,这些资产包专为本地系统存储而设计。
    对于多个用户的使用,同理可以通过将资产部署到Nucleus的服务器上,可以实现不同成员间的资产协作,同时可以在GUI左下角的Content中方便地显示资产缩略图。
    在这里插入图片描述
    在这里插入图片描述

注意:资产包对应的版本应当也是Isaac Sim 4.0.0版本。

注意:Isaac Sim的资产通常放置于/NVIDIA/Assets/Isaac/4.0文件夹中,但当前其中的资产仅适用于最新的 Isaac Sim 4.0.0 版本。

通过由Auromix提供的便捷脚本将多个资产包合并为同一个包:

script_name="copy_isaac_sim_local_assets.sh" && directory_name="/tmp" && download_url="https://raw.githubusercontent.com/Auromix/auro_sim/main/scripts" && full_script_path="${directory_name}/${script_name}" && wget -O $full_script_path $download_url/$script_name && sudo chmod +x $full_script_path && clear && bash $full_script_path && rm -rf $full_script_path

在将资产包合并为isaac_sim_assets_final_package后,将isaac_sim_assets_final_package目录下的Assets文件夹上传到 Nucleus 服务器的omniverse://localhost/Library/NVIDIA目录下。

依次点击LIBRARY->Nucleus Navigator来在omniverse://localhost/Library/目录下创建名为NVIDIA的文件夹
在这里插入图片描述

isaac_sim_assets_final_package目录下的Assets文件夹拖动到Nucleus Navigatorlocalhost/Library/NVIDIA里,或者右键添加文件夹到该位置。
在这里插入图片描述

随后运行一次isaac sim,并指定默认的资产根路径:

isaac_sim --/persistent/isaac/asset_root/default="omniverse://localhost/Library/NVIDIA/Assets/Isaac/4.0"

随后验证 Isaac Sim 资源位置是否设置成功,请在打开的Isaac Sim GUI中转到Isaac Utils > Nucleus Check菜单。
应当提示资产位置为刚才所设置的内容,此时说明本地资产路径已经成功设置。
在这里插入图片描述

注意:如果仍存在问题,请参考官方关于资产包的说明文档。

4.启动Isaac Sim仿真

LIBRARY中找到Isaac Sim,点击Launch启动,按照默认选项,点击START继续启动
在这里插入图片描述

注意:过程中可能会遇到一些依赖安装、着色器缓存预热,光追编译、加载等情况,根据个人电脑性能情况,无响应情况恢复的速度不同,等待即可。

在这里插入图片描述

  • 观察ISAAC SIM主界面
    在成功启动并完成编译、配置等过程后,Isaac Sim的空主界面应当为如下状态:
    在这里插入图片描述
    若终端中并无报错,并且页面如图所示,说明Isaac Sim配置成功。

  • 加载机器人

在GUI下方三分之一处的地址栏内输入:

omniverse://localhost/Library/NVIDIA/Assets/Isaac/4.0/Isaac/IsaacLab/Robots/Unitree/H1/

在找到Unitree公司的h1.usd机器人文件,将其拖拽入视口。
在这里插入图片描述

  • 加载环境

依次选中Create->Isaac->Environments->Flat Grid来加载一个简单的带光照的实验室场景。
在这里插入图片描述

  • 观察Isaac Sim

当看到这个画面时,恭喜你,已经配置好了Isaac相关的环境和本地资产,现在你可以正常地在Omniverse生态中使用Nvidia的Isaac Sim了。
在这里插入图片描述

云端部署(可选的)

注意:
以上安装及配置步骤是适用于工作站的,如果需要在云上部署,请参考Isaac Sim的云端部署。

相关资料

Nvidia Omniverse Isaac Sim Documentation
Isaac Sim ROS2 tutorial
How to use Isaac Sim with your own robot?

这篇关于Nvidia Isaac Sim 入门教程 2024(2)安装与配置的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1073787

相关文章

ESP32 esp-idf esp-adf环境安装及.a库创建与编译

简介 ESP32 功能丰富的 Wi-Fi & 蓝牙 MCU, 适用于多样的物联网应用。使用freertos操作系统。 ESP-IDF 官方物联网开发框架。 ESP-ADF 官方音频开发框架。 文档参照 https://espressif-docs.readthedocs-hosted.com/projects/esp-adf/zh-cn/latest/get-started/index

Linux 安装、配置Tomcat 的HTTPS

Linux 安装 、配置Tomcat的HTTPS 安装Tomcat 这里选择的是 tomcat 10.X ,需要Java 11及更高版本 Binary Distributions ->Core->选择 tar.gz包 下载、上传到内网服务器 /opt 目录tar -xzf 解压将解压的根目录改名为 tomat-10 并移动到 /opt 下, 形成个人习惯的路径 /opt/tomcat-10

uniapp接入微信小程序原生代码配置方案(优化版)

uniapp项目需要把微信小程序原生语法的功能代码嵌套过来,无需把原生代码转换为uniapp,可以配置拷贝的方式集成过来 1、拷贝代码包到src目录 2、vue.config.js中配置原生代码包直接拷贝到编译目录中 3、pages.json中配置分包目录,原生入口组件的路径 4、manifest.json中配置分包,使用原生组件 5、需要把原生代码包里的页面修改成组件的方

VMware9.0详细安装

双击VMware-workstation-full-9.0.0-812388.exe文件: 直接点Next; 这里,我选择了Typical(标准安装)。 因为服务器上只要C盘,所以我选择安装在C盘下的vmware文件夹下面,然后点击Next; 这里我把√取消了,每次启动不检查更新。然后Next; 点击Next; 创建快捷方式等,点击Next; 继续Cont

vcpkg安装opencv中的特殊问题记录(无法找到opencv_corexd.dll)

我是按照网上的vcpkg安装opencv方法进行的(比如这篇:从0开始在visual studio上安装opencv(超详细,针对小白)),但是中间出现了一些别人没有遇到的问题,虽然原因没有找到,但是本人给出一些暂时的解决办法: 问题1: 我在安装库命令行使用的是 .\vcpkg.exe install opencv 我的电脑是x64,vcpkg在这条命令后默认下载的也是opencv2:x6

创新、引领、发展——SAMPE中国2024年会在京盛大开幕

绿树阴浓夏日长,在这个色彩缤纷的季节,SAMPE中国2024年会暨第十九届国际先进复合材料制品原材料、工装及工程应用展览会在中国国际展览中心(北京朝阳馆)隆重开幕。新老朋友共聚一堂,把酒话桑麻。 为期4天的国际学术会议以“先进复合材料,引领产业创新与可持续化发展”为主题,设立了34个主题分会场,其中包括了可持续化会场、国际大学生会场、中法复合材料制造技术峰会三个国际会场和女科技工作者委员会沙龙,

IDEA配置Tomcat远程调试

因为不想把本地的Tomcat配置改乱或者多人开发项目想测试,本文主要是记录一下,IDEA使用Tomcat远程调试的配置过程,免得一段时间不去配置到时候忘记(毕竟这次是因为忘了,所以才打算记录的…) 首先在catalina.sh添加以下内容 JAVA_OPTS="-Dcom.sun.management.jmxremote=-Dcom.sun.management.jmxremote.port

【服务器运维】CentOS6 minimal 离线安装MySQL5.7

1.准备安装包(版本因人而异,所以下面的命令中版本省略,实际操作中用Tab自动补全就好了) cloog-ppl-0.15.7-1.2.el6.x86_64.rpmcpp-4.4.7-23.el6.x86_64.rpmgcc-4.4.7-23.el6.x86_64.rpmgcc-c++-4.4.7-23.el6.x86_64.rpmglibc-2.12-1.212.el6.x86_64.r

【服务器运维】CentOS7 minimal 离线安装 gcc perl vmware-tools

0. 本机在有网的情况下,下载CentOS镜像 https://www.centos.org/download/ 1. 取出rpm 有的情况可能不需要net-tools,但是如果出现跟ifconfig相关的错误,就把它安装上。另外如果不想升级内核版本的话,就找对应内核版本的rpm版本安装 perl-Time-Local-1.2300-2.el7.noarch.rpmperl-Tim

Windows/macOS/Linux 安装 Redis 和 Redis Desktop Manager 可视化工具

本文所有安装都在macOS High Sierra 10.13.4进行,Windows安装相对容易些,Linux安装与macOS类似,文中会做区分讲解 1. Redis安装 1.下载Redis https://redis.io/download 把下载的源码更名为redis-4.0.9-source,我喜欢跟maven、Tomcat放在一起,就放到/Users/zhan/Documents