ROS - unity - VR(HTC_VIVE) - tracker - pointcloud联合

52Hertz_leona

已于 2024-02-22 15:30:07 修改

阅读量2.1k

点赞数 46

CC 4.0 BY-SA版权

分类专栏：遥操作机器人与ROS 文章标签： unity vr 游戏引擎

于 2023-12-23 14:17:33 首次发布

本文链接：https://blog.youkuaiyun.com/eyas3/article/details/135167832

Unity 脚本 API

一、 ROS(ubuntu)和unity(windows)之间通讯的方法

方法一：Unity-Robotics-Hub项目提供的ros_tcp_endpoint包

方法二：ROS#

二、import urdf to unity

三、unity - VR

四、unity - tracker

五、unity - realsense - pointcloud

一、 ROS(ubuntu)和unity(windows)之间通讯的方法

方法一：Unity-Robotics-Hub项目提供的ros_tcp_endpoint包

video：youtube视频

参考：Unity-Robotics-Hub项目，该项目提供了ros_unity_integration通讯方法，pick_and_place机械臂仿真实例

ros_unity_integration总结：

1、【unity】在unity里下载url
- https://github.com/Unity-Technologies/ROS-TCP-Connector.git?path=/com.unity.robotics.ros-tcp-connector#v0.6.0
2、【ROS】运行 </

最低0.47元/天解锁文章

200万优质内容无限畅学

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

52Hertz_leona

关注关注

46
点赞
踩
48

收藏

觉得还不错? 一键收藏
1
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

机器人环境仿真软件：Unity_（11）.虚拟现实与机器人仿真

kkchenjj的博客

05-27

952

虚拟现实（Virtual Reality, VR）是一种通过计算机生成的三维环境，使用户能够身临其境地感受到虚拟世界的体验。沉浸式体验：用户可以通过VR设备（如头戴式显示器、手柄等）完全沉浸在虚拟环境中，更直观地观察机器人的行为。交互性：用户可以与虚拟环境中的物体进行交互，模拟真实世界的操作，从而更好地测试和调试机器人算法。多感官反馈：VR技术不仅提供视觉反馈，还可以结合听觉、触觉等多感官反馈，使仿真更加真实。在本节中，我们详细探讨了如何在Unity中结合虚拟现实技术进行机器人仿真。

win10离线安装ros-melodic-desktop_full

AmyMonkey的博客

12-29

2525

在线安装最容易出现安装包下载不了导致的安装失败问题。本篇文章续上篇在线安装：安装在线包下载ros-melodic-desktop_full，下载地址： ros-melodic离线包下载地址开始菜单中，右键 “x64 Native Tools Command Prompt for VS 2019” ，以管理员身份运行。修改安装包搜索优先级，如图所示，是下载的nupkg文件所在的文件夹地址。 choco source add -n=ros-win -s=“E:\roswininstall” choc.

1 条评论您还未登录，请先登录后发表或查看评论

ViveTrackers：一个简单的库，可在Unity3D中使用HTC Vive Tracker设备

02-06

在Unity3D中使用HTC Vive Tracker设备具有以下优点：直接使用OpenVR API以获得最佳性能小型图书馆，易于集成到任何项目中完整的测试场景以了解库的使用一些来设置Unity3D，SteamVR和Windows，以从您的Vive Tracker获得最佳质量的输出系统要求使用Unity3D 2017.4.35f1（也应与较新版本一起使用）为Windows目标平台开发。

ROS-Unity连接教程

gls_nuaa的博客

11-25

9899

本篇文章主要介绍基于ROS-TCP-Connector、ROS-TCP-Endpoint两个Unity接口与ROS进行通信的环境配置，并对官方给出的Unity和ROS相互通信示例中的消息部分做了说明。

Unity中简单的使用HTC VIVE Tracker与物体绑定

夕阳追脚尖的博客

02-17

4900

用到Tracker，首先要把Tracker与电脑相连。打开Unity，新建一个3D项目。然后导入SteamVR插件（我用的是SteamVR插件1.2.3）。删除自带的MainCramer。在Project视图中找到【CameraRig】（Assets/SteamVR/Prefabs/CameraRig）然后拖入到场景中。创建一个Cube。使Cube在摄像头所能看到的位置。然后点击Co...

Unity-ROS与话题与服务（二）

lovely_yoshino的博客

12-19

1万+

将消息导入Unity的步骤如下所示Unity的菜单“Robotics→Generate ROS Messages…”选择。在“ROS message path”中选择“catkin_ws/src”。然后就可以看到path下的msg都会显示在Unity下面然后点击“MyString.msg”中的“Build msg”。这样“MyString.msg”将被转换成c#脚本“MyStringMsg”，并在Project窗口中输出“RosMessages”。

【亲测免费】探索移动机器人世界：Unity与ROS的奇妙组合

gitblog_00025的博客

06-22

658

探索移动机器人世界：Unity与ROS的奇妙组合在这个数字化的时代，我们正逐步进入一个由机器人辅助的未来。Unity与ROS结合的移动机器人入门教程是一个专为初学者设计的开源项目，它将带领你踏入这个精彩的世界。通过这款教程，你可以学习如何利用Unity的可视化强项和ROS（机器人操作系统）的强大功能来构建你的移动机器人系统。 1. 项目介绍这个项目采用Git进行版本控制，提供了详细的步骤引...

Vive Tracker 和 unity结合

翻肚鱼儿的博客

10-21

1129

unity

pointcloud-to-laserscan

02-19

安装pointcloud_to_laserscan将三维点云转化为二维LaserScan 注意避坑：不能用git clone来下载，即便是选择了相应版本，最终下载下来的也是默认版本。只能下载ZIP压缩包然后解压到工作空间！我的ros版本是noetic，...

point_cloud_compression.tar.gz_ROS_Ros点云_cloud_point cloud_点云传输

09-24

本项目“point_cloud_compression.tar.gz”涉及到的是ROS中的点云数据压缩与传输。下面将详细讲解点云数据处理、ROS话题机制以及点云数据在ROS中的压缩与传输。 1. 点云数据处理： - **点云数据结构**：`sensor_...

VINS-Fusion开源代码之vins_node数据流分析

lida2003的专栏

09-15

7439

是一个非常有用的命令行工具，用于与 ROS 话题进行交互，例如查看话题的信息、发布数据或查看消息的流动。测试的目标是覆盖代码中的每条语句、分支和路径，以确保系统内部的逻辑和实现是正确的。模块化分析思路相信大家都不陌生，说起来是很简单，但是在实际工作中的灵活应用作为研发工程师来说是基本功底（压箱底的功底，哈哈）。的测试方法，测试人员只需要知道输入和期望的输出，而不关注代码的具体实现细节。在黑盒测试中，测试人员输入不同的用户名和密码组合来测试登录功能是否正确工作，而无需关心背后的验证逻辑如何实现。

UnityROS：如何在Unity3D中使用ROS的示例。为Unity Technologies斯坦福大学开发

02-06

统一ROS 如何在Unity3D中使用ROS的示例。专为Unity Technologies开发。该项目旨在演示Unity引擎内部与本地ROS实例进行通信的ROS.Net用法。要求： Ubuntu 16.04 Unity 2018.1.0f2（） ROS Kinetic Kame完整安装（）中提供了更多文档/说明。

ros-sharp:ROS＃是C＃中的一组开源软件库和工具，用于与.NET应用程序（尤其是Unity3D）中的ROS通信。

05-14

是一组开源软件库和工具，用于与来自的通信。应用程序，尤其是。是一些展示，展示了使用ROS＃可以完成的工作。社区提供了ROS＃的各种其他应用示例。请不要犹豫，发布您的！内容：，和.NET解决方案：通过ROS＃使用的包。 Unity3D ：包含的Unity项目 RosBridgeClient和Urdf和MessageGeneration的Unity特定扩展示例场景和参考代码（请参阅Wiki ）发行版除源代码外， Release还包含：包含Unity3D项目资产的Unity资产包：可以使用ROS＃导入其他Unity项目中。 RosBridgeClient和Urdf的二进制文件可以在使用这些库的其他.NET项目中使用。最新版本也将在Unity Asset Store中发布。请直接从此master分支的技巧中获取最新的开发版本。 Unity机器

探索未来机器人技术：Unity的ROS TCP Connector

gitblog_00888的博客

08-16

868

探索未来机器人技术：Unity的ROS TCP Connector 本文将向您介绍一个强大的开源项目——Unity的ROS TCP Connector。这个项目为ROS（Robot Operating System）和Unity之间的实时通信提供了一个可靠的桥梁，使得开发者能够在Unity中实现精细的机器人模拟和可视化。项目介绍 ROS TCP Connector是Unity Technolog...

ROS与Unity通讯总结

weixin_41311377的博客

05-07

1万+

ROS与Unity 3D通讯总结参考文章:https://github.com/Unity-Technologies/Unity-Robotics-Hub https://github.com/Unity-Technologies/ROS-TCP-Endpoint https://github.com/Unity-Technologies/ROS-TCP-Connector 目前使用是GitHub开源的Unity-Robotics-Hub项目,其中在Unity的PC端使用ROS#已经集中 ROS-TCP-

Unity 与虚拟机ROS连接

weixin_45654152的博客

12-01

871

Unity 连接虚拟机ROS

从Unity Robotics Hub入门Unity-ROS

热门推荐

lovely_yoshino的博客

12-06

1万+

对于Unity而言，其拥有非常完备的物理特性，这对于机器人仿真是非常有用的，但是实际上Unity和ROS之间的通信一直是摆在两者之间的难题，正好看到宇宙爆肝锦标赛冠军写的这个系列，所以个人想参照为数不多的资料来进行整理，并完成这个系列的文章。“Unity Robotics Hub”是一种基于Unity环境的机器人模拟工具、教程、资源以及文档信息的资料库。机器人工作者可以在模拟场景中使用Unity。卸载旧的docker版本允许apt命令可以使用HTTPS访问Docker repository 添加Dock

Unity HTC vive移动定位器的开发使用

爱尚游Bin的博客

04-19

3775

VIVE Tracker是VIVE VR系列产品的配件，可以通过绑定现实世界中的物体，来追踪物体的位置。从使用的角度来看，它更像是一个阉割版的手柄，因为它具备手柄一样的位置追踪而没有实体按键，由于体积小巧和便携，它可以被绑定在任意物体上，将现实的物体带入VR环境。使用前按照Tracker使用说明书进行与HTC vive设备进行配对连接。配对成功后，Tracker设备指示灯为绿色。SreamVR...

最新发布

03-19

<think>嗯，用户在使用catkin_make编译Carla ROS Bridge时遇到了多个同名包的问题，并且在编译后无法找到devel/setup.bash文件。首先，我需要分析这些同名包的原因。可能的情况是用户的工作空间中有重复的包路径，导致编译系统无法正确处理。例如，用户可能克隆了仓库到不同的目录，或者子模块嵌套导致路径重复。接下来，用户执行source devel/setup.bash时提示文件不存在，这通常意味着编译没有成功完成，因此devel目录没有被正确生成。编译失败的原因很可能就是前面提到的重复包问题，导致catkin_make中途停止，从而没有生成必要的setup文件。需要指导用户如何解决这些重复包的问题。首先应该检查工作空间中的src目录，查找是否有重复的包路径。例如，用户可能同时有ros-bridge/carla-ros-bridge/src/ros-bridge/...和ros-bridge/...这样的路径，这会导致catkin工具发现多个同名包，进而报错。解决方法包括清理重复的包，可能通过移除重复的目录或调整工作空间的结构。另外，用户可能需要检查是否正确地克隆了子模块，或者是否有误操作导致包被复制到错误的位置。建议用户手动删除重复的包目录，然后重新运行catkin_make，确保编译过程顺利完成，从而生成devel/setup.bash文件。此外，还需要提醒用户在编译成功后正确source环境变量，以确保ROS能够识别新编译的包。如果用户使用catkin build命令，可能需要使用不同的目录结构，但当前问题主要是重复包导致的编译失败，因此重点应放在解决路径冲突上。</think>在运行`catkin_make`时出现多个同名ROS包冲突的问题，这会导致编译失败。以下是逐步解决此问题的方法： --- ### **问题分析** 错误信息显示**同一工作空间（workspace）中存在多个同名ROS包**，例如： ``` Multiple packages found with the same name "carla_ackermann_control": - ros-bridge/carla-ros-bridge/src/ros-bridge/carla_ackermann_control - ros-bridge/carla_ackermann_control ``` 原因是工作空间的`src`目录中存在重复的包路径。这通常由以下原因导致： 1. **错误地克隆仓库**：可能重复克隆了Carla ROS Bridge的子模块。 2. **子模块嵌套问题**：`carla-ros-bridge`可能自身包含子模块，与其他手动克隆的包冲突。 --- ### **解决方案** #### **步骤1：清理重复的包** 进入工作空间的`src`目录，手动删除重复的包： ```bash cd ~/carla-ros-bridge/catkin_ws/src # 删除所有重复路径的包（根据错误提示选择保留一个） # 例如：保留 "ros-bridge/carla-ros-bridge/src/ros-bridge/carla_ackermann_control" # 删除 "ros-bridge/carla_ackermann_control" rm -rf ros-bridge/carla_ackermann_control rm -rf ros-bridge/carla_ackermann_msgs # 其他重复包同理 ``` #### **步骤2：确保子模块正确初始化** 如果使用了Git子模块，需重新初始化： ```bash cd ~/carla-ros-bridge/catkin_ws/src git submodule update --init --recursive ``` #### **步骤3：重新编译** 清理之前的编译缓存并重新编译： ```bash cd ~/carla-ros-bridge/catkin_ws catkin clean -y # 若使用catkin_tools catkin_make ``` #### **步骤4：Source环境变量** 编译成功后，`devel/setup.bash`会自动生成： ```bash source devel/setup.bash ``` --- ### **注意事项** 1. **路径规范**：确保`src`目录中的包路径唯一，避免嵌套或重复克隆。 2. **子模块管理**：若从Git仓库克隆，建议使用`git submodule`统一管理依赖。 3. **编译失败排查**：若编译仍失败，检查终端输出的具体错误信息（如依赖缺失）。 --- ### **补充说明** - **`catkin_make` vs `catkin build`**：若使用`catkin_tools`工具链，建议使用`catkin build`，它能更好地处理复杂包依赖。 - **工作空间结构**：标准ROS工作空间结构应确保所有包位于`src`目录下，且无重复名称。