ros_gazebo/turtlebot3 室内仿真导航,提取camera/image和pose位姿真值,并将topic 时间同步对齐,最后制作成kitti 格式的数据集。

本文涉及的产品
资源编排,不限时长
简介: ros_gazebo/turtlebot3 室内仿真导航,提取camera/image和pose位姿真值,并将topic 时间同步对齐,最后制作成kitti 格式的数据集。

(1)ros_gazebo turtlebot3 室内环境导航仿真。参考ubuntu 16.04+ros kinetic + gazebo+ aws-robotics 室内环境导航仿真_May Wang的博客-CSDN博客

$ cd catkin_ws
$ source develop/setup.bash
$ expore TURTLEBOT3_MODEL=waffle_pi
$ roslaunch navigation_simulation small_house_turtlebot_navigation.launch follow_route:=false dynamic_route:=true gui:=true

(2) 录制topic camera/rgb/image_raw 和topic /tf 的bag包。(tf中odom到map 的trandform默认为机器人相对地图的位姿)

$ rosbag record /tf /camera/rgb/image_raw -o out.bag

(3) 播放该rosbag包,查看bag信息。

rosbag play <bagfile>
rosbag play <bagfile> --topic /topic1
rosbag play out_2022-04-01-15-43-05.bag --topic /tf
$ rosbag info out.bag

f6600b3f9d074d4890b2302209cd3d5e.png

(3)从该rosbag中提取出图片和机器人的位姿信息。

------------------------------------------------------------------------------------------------

(尝试过程,可省略)将bag中的pose 的topic 信息提取为csv文件

rosbag record /gazebo/model_states -o gazebo_state.bag
rostopic echo   -b   gazebo_state.bag   -p  /gazebo/model_states  >  gazebo_state.txt

------------------------------------------------------------------------------------------------

(尝试过程,可省略)gazebo中获得任意model的groundtruth的pose

rosservice call /gazebo/get_model_state "model_name: 'turtlebot3_waffle_pi'
relative_entity_name: 'world'"
header: 
  seq: 2
  stamp: 
    secs: 609
    nsecs: 288000000
  frame_id: "world"
pose: 
  position: 
    x: -0.266953255634
    y: -2.79826728758
    z: -0.0010085243088
  orientation: 
    x: -0.000302331025397
    y: -0.00156445147662
    z: 0.188558351213
    w: -0.982060695311
twist: 
  linear: 
    x: -0.238763637508
    y: 0.0951505227823
    z: 8.2381658963e-05
  angular: 
    x: -0.000829139385973
    y: -0.000544168135714
    z: -0.0354440816541
success: True
status_message: "GetModelState: got properties"

--------------------------------------------------------------------------------------

(4)通过tf topic 获取位姿相对麻烦,故通过具有发布机器人位姿真值功能的gazebo插件libgazebo_ros_p3d.so,添加位姿真值的topic  /ground_truth/state  实现。

获取机器人turtlebot3 在gazebo 中仿真导航时的位姿真值_May Wang的博客-CSDN博客

(5)重新录制 包含图片和位姿真值的bag包。

$ cd catkin_ws
$ source develop/setup.bash
$ expore TURTLEBOT3_MODEL=waffle_pi
$ roslaunch navigation_simulation small_house_turtlebot_navigation.launch follow_route:=true gui:=true

新终端

rosrun rqt_image_view rqt_image_view

如图:

d536201f6e6b43628abea8f5a0e371ac.png

新终端

rosbag record /groundtruth/state /camera/rgb/image_raw -o out.bag

(6)(可忽略,尝试过程)从bag中提取图片和pose信息,图片以时间戳命名,pose信息保存为txt文件。

新建文件夹:rosbag_data,新建文档get_image.py,如下:

# coding:utf-8
# get_image.py
import roslib;
import rosbag
import rospy
import cv2
from sensor_msgs.msg import Image
from cv_bridge import CvBridge
from cv_bridge import CvBridgeError
# 存放解析输出图片的位置
path = '/home/wsx/0A_rosbag_data/image/'  
class ImageCreator():
    def __init__(self):
        self.bridge = CvBridge()
        # 要读取的bag文件;
        with rosbag.Bag('nav_image_pose.bag', 'r') as bag:  
            for topic, msg, t in bag.read_messages():
            # 图像的topic;
                if topic == "/camera/rgb/image_raw":  
                    try:
                        cv_image = self.bridge.imgmsg_to_cv2(msg, "bgr8")
                    except CvBridgeError as e:
                        print
                        e
                    timestr = "%.1f" % msg.header.stamp.to_sec()
                    # %.6f表示小数点后带有6位,可根据精确度需要修改;
                    image_name = timestr + ".jpg"  # 图像命名:时间戳.jpg
                    cv2.imwrite(path + image_name, cv_image)  # 保存;
if __name__ == '__main__':
    # rospy.init_node(PKG)
    try:
        image_creator = ImageCreator()
    except rospy.ROSInterruptException:
        pass

提取图片,新建终端

wsx@hello:~/0A_rosbag_data$ python get_image.py

结果如下:

c607ff5be654493cb8db284a3ac8a65f.png

提取pose, 每一帧都保存为一个txt文件,方便后面进行时间戳对齐。

rostopic echo   -b   nav_image_pose.bag -p  /ground_truth/state >  pose.txt

(7)(可忽略,尝试过程)时间戳对齐,参考激光雷达LiDAR和相机的.bag数据解析与对齐_Summer_crown的博客-CSDN博客。

 (8)  将(5)中录制的包中的两个topic :image_raw和ground_truth/state(分别为sensor_msgs::image 和nav_msgs::odometry 类型)同步时间戳对齐,并保存为kitti 数据格式。

rosbag包存放在 0A_rosbag_data 中,参考https://github.com/zhanghm1995/ROSKittiWriter,放入catkin_ws/src 中, 添加 nav_msgs :: odometry 类的groundtruth topic以及与image_raw topic的相关时间同步和读写保存操作,然后catkin_make。(参考我修改后的代码)

在0A_rosbag_data下建立 kitti_data/pose 和image 两个文件夹。

打开两个终端,运行

wsx@hello:~/0A_rosbag_data$ rosbag play nav_image_pose.bag

wsx@hello:~/catkin_ws$ roslaunch ros_kitti_writer kitti_writer_standalone.launch

结果如下:

[ WARN] [1649321211.383564639]: Begin saving data 13152
[ WARN] [1649321211.418604931]: Begin saving data 13153
[ WARN] [1649321211.455254096]: Begin saving data 13154
[ WARN] [1649321211.464548000]: Begin saving data 13155
[ WARN] [1649321211.498690634]: Begin saving data 13156
[ERROR] [1649321211.508932578]: Waiting for image and lidar topics!!!
[ WARN] [1649321211.542629590]: Begin saving data 13157
[ WARN] [1649321211.586601073]: Begin saving data 13158
[ WARN] [1649321211.630599996]: Begin saving data 13159
[ WARN] [1649321211.639320367]: Begin saving data 13160
[ WARN] [1649321211.675267830]: Begin saving data 13161
[ WARN] [1649321211.709811994]: Begin saving data 13162
[ WARN] [1649321211.750695039]: Begin saving data 13163
[ WARN] [1649321211.797838768]: Begin saving data 13164
[ INFO] [1649321211.841893824]: Sync_Callback
[ WARN] [1649321211.926622021]: Begin saving data 13165
[ WARN] [1649321211.970652961]: Begin saving data 13166
[ WARN] [1649321211.979278670]: Begin saving data 13167

f3ff7829426a4683a7eab9377140f18a.pngd1da89deab2a4f6f82413631c5c472a9.pngea1f3a92841b47f5b3d4a9b9a84bce4d.png089651ebf829475380809d4029c5c814.pngd0cc7be731ad49aba86e3ae7d5c4cd38.png9dfb4767408243f7a2d774acf51f5625.png








相关实践学习
使用ROS创建VPC和VSwitch
本场景主要介绍如何利用阿里云资源编排服务,定义资源编排模板,实现自动化创建阿里云专有网络和交换机。
阿里云资源编排ROS使用教程
资源编排(Resource Orchestration)是一种简单易用的云计算资源管理和自动化运维服务。用户通过模板描述多个云计算资源的依赖关系、配置等,并自动完成所有资源的创建和配置,以达到自动化部署、运维等目的。编排模板同时也是一种标准化的资源和应用交付方式,并且可以随时编辑修改,使基础设施即代码(Infrastructure as Code)成为可能。 产品详情:https://www.aliyun.com/product/ros/
目录
相关文章
|
Ubuntu 机器人 API
ubuntu 16.04+ros kinetic + gazebo+ aws-robotics 室内环境导航仿真
ubuntu 16.04+ros kinetic + gazebo+ aws-robotics 室内环境导航仿真
289 0
|
6天前
|
数据可视化 算法 机器人
ROS2 - Gazebo 联合仿真项目模版
ROS2 - Gazebo 联合仿真项目模版
13 1
|
6天前
|
传感器 数据可视化 机器人
一级倒立摆控制 —— ROS2 仿真
一级倒立摆控制 —— ROS2 仿真
16 1
|
2月前
|
机器学习/深度学习 传感器 算法
强化学习(RL)在机器人领域的应用,尤其是结合ROS(Robot Operating System)和Gazebo(机器人仿真环境)
强化学习(RL)在机器人领域的应用,尤其是结合ROS(Robot Operating System)和Gazebo(机器人仿真环境)
84 2
|
3月前
|
传感器
[ROS2] --- topic
[ROS2] --- topic
73 0
|
11月前
|
存储 API C++
ROS Topic 相关API接口与命令行介绍
ROS Topic 相关API接口与命令行介绍
462 0
|
XML 机器人 C++
【4. ROS的主要通讯方式:Topic话题与Message消息】(2)
【4. ROS的主要通讯方式:Topic话题与Message消息】(2)
203 0
|
传感器 机器人 C++
【4. ROS的主要通讯方式:Topic话题与Message消息】(1)
【4. ROS的主要通讯方式:Topic话题与Message消息】(1)
287 0
|
机器学习/深度学习 机器人 中间件
ubuntu16.04下ROS操作系统学习笔记(五)gazebo物理仿真环境搭建、加载服务端模型数据减少报错
ubuntu16.04下ROS操作系统学习笔记(五)gazebo物理仿真环境搭建、加载服务端模型数据减少报错
170 0
|
机器学习/深度学习 数据可视化 网络协议
ubuntu16.04下ROS操作系统学习笔记(二)命令工具了解和仿真小海龟
ubuntu16.04下ROS操作系统学习笔记(二)命令工具了解和仿真小海龟
219 0

推荐镜像

更多