从零开始学定位 --- 使用kaist数据集进行LIO-SAM建图

2023-05-16

之前的文章只是将数据的雷达在rviz中进行可视化了,并没有实际用起来。

这篇文章将使用Kaist Urban08 数据使用LIO-SAM进行三维点云地图的构建。

1 clone 工程

仓库的地址是
https://github.com/xiangli0608/Learning_localization_from_scratch_ws
代码已经写好,直接编译就可以了。

由于放入了LIO_SAM,所以需要依赖 gtsam 4.0.2 。

2 bag的转录

之前说过可以用 file_player的形式将数据放出来,但是没有通过bag播放数据方便。所以这一步先将kaist数据集转成bag文件。

转录使用的工具是 kaist2bag,这个工具已经放在工程里了,可以直接用,在 src/kaist_tool/kaist2bag。

这是别人的开源项目,这里直接用了,首先感谢一下这个老哥。

kaist2bag/README.md 里有说怎么进行使用,这里简单说明一下。

2.1 修改路径

首先更改 src/kaist_tool/kaist2bag/config/config.ymal

将前2行进行更改, dataset是数据集的路径,save_to是新生成的bag保存的路径

dataset: "/home/touchair/kaist_urban_dataset/urban08"
save_to: "/home/touchair/kaist_urban_dataset/urban08/bag"

在这个config里还可以进行是否输出某些topic的选择。

2.2 生成bag

之后通过如下命令执行launch roslaunch kaist2bag kaist2bag.launch

执行之后程序会运行一段时间,运行结束之后会在 svae_to 文件夹生成很多个bag, 每个topic一个bag。

接下来就是对这些bag进行合并。

2.3 合并bag

上个步骤生成的bag是一个topic一个bag,所以想要跑的话需要将这些bag合并一下。

合并的命令为 rosrun kaist2bag mergebag.py merged.bag <bag_file_1> ... <bag_file_8>
merged.bag是最后输出的bag,<bag_file_1> 以及之后的bag的名称,是需要合并的bag,这里可以使用绝对路径也可以使用相对路径。

通过这步,咱就将kaist的数据集转成了bag。

这一部分参考了勇哥知乎上的文章
KAIST数据集转换为rosbag https://zhuanlan.zhihu.com/p/544766790

3 运行LIO-SAM进行建图

3.1 修改bag名字

需要将bag的名字修改到 src/mapping/LIO-SAM/launch/run.launch 中的 bag_filename 变量中。

3.2 运行LIO-SAM

之后运行lio-sam,运行之前别忘了要source一下。
roslaunch lio_sam run.launch

之后就会出现已经配置好的rviz界面,如下所示:

请添加图片描述

4 输出轨迹进行evo评估

想要评估建图效果,可以用建图的轨迹与数据集提供的真值做对比,进行精度分析。

代码里目前实现了输出轨迹文件的功能。evo需要的是txt格式的轨迹,数据集提供的真值是csv格式的,所以需要做一下转换。

4.1 将kaist数据集提供的真值转成tum格式

这一步需要安装依赖项
pip3 install numpy scipy
已经填写在 install_dependence.sh 文件中。
执行步骤为

./src/scripts/kaist2evo.py -p /media/trunk/Trunk/0-LX/Kaist/Urban08

-p 后边接的是数据集的文件夹,之后可以加 -o 加输出轨迹文件的地址。

执行之后会在Urban08文件夹下生成2个txt文件,分别是 tum_ground_truth.txt 与 tum_vrs_gps.txt。

  • tum_ground_truth.txt 是将 global_pose.csv 转成的tum格式的轨迹文件
  • tum_vrs_gps.txt 是将 sensor_data/vrs_gps.csv 转成的tum格式的轨迹文件

当然,这个我已经转好了,放在了 src/doc/ground_truth 文件夹下,不再需要自己转了。

4.2 进行evo轨迹对比

当lio-sam结束建图之后,会在 Downloads/LOAM 文件夹下生成pcd地图,同时会在 src/doc/mapping_results 文件夹下生成 tum 格式的轨迹文件。

然后将 src/doc/ground_truth/tum_ground_truth.txt 与 src/doc/mapping_results/tum_lio_sam_pose.txt 这两个文件,分别填在 src/scripts/evo.sh 的 txt1 与 txt2 中

在执行 src/scripts/evo.sh 即可绘制轨迹图,ape图,rpe图。

请添加图片描述
请添加图片描述
可以看到,z方向上还是偏差比较大的,之后存在改进空间。

5 代码的改动内容

5.1 添加ring字段

由于lio-sam需要ring字段的数据,但是Kaist数据集中的vlp并没有这个字段,这时ring字段可以自己算一下再添加到点云中。

  float angle;
  uint16_t ring;
  while (!file.eof()) {
      PointXYZIR point;
      file.read(reinterpret_cast<char *>(&point.x), sizeof(float));
      file.read(reinterpret_cast<char *>(&point.y), sizeof(float));
      file.read(reinterpret_cast<char *>(&point.z), sizeof(float));
      file.read(reinterpret_cast<char *>(&point.intensity), sizeof(float));
      // 先计算角度,根据角度得到ring,然后将ring添加到点云中
      angle = atan2(point.z, sqrt(point.x * point.x + point.y * point.y)) / M_PI * 180 + 15;
      ring = round(angle / 2);
      point.ring = ring;
      pcl_cloud.points.push_back(point);
  }

5.2 注释掉lio-sam中time字段检查

暂时将lio-sam中的time字段检查给注释掉了。每个点的时间戳现在还没有考虑好怎么做。

没有time字段,自然也就没有做运动畸变去除。运动畸变去除这里也注释掉了。

5.3 订阅左右2个雷达数据

KAIST数据集有两个激光雷达,左右对称分布,且安装位置和地面有一定倾斜,但是IMU安装位置是平行于地面的。

之前lio-sam原版代码只订阅一个点云都话题。当只使用Kaist数据集的1个点云数据进行建图的效果不太好,所以将lio-sam改成订阅2个点云话题了。

具体的代码处理逻辑如下:

  • 订阅2个雷达数据
  • 将左右激光雷达通过lidar到IMU的外参转换到IMU系下,以减少其他坐标转换带来的影响
  • 再完成2个点云的合并得到一个range image

具体代码改动如下所示

回调从1个回调 cloudHandler,改成了 pointCloudLeftHandler 与 pointCloudRightHandler 2个回调

右雷达为辅雷达,其回调如下所示。


    void pointCloudRightHandler(const sensor_msgs::PointCloud2ConstPtr &rightPointCloud) {
        std::lock_guard<std::mutex> lock1(veloLock);
        cachePointCloudRightQueue.push_back(*rightPointCloud);
        if (cachePointCloudRightQueue.size() < 5) {
            return;
        }

        currentPointCloudRightMsg = std::move(cachePointCloudRightQueue.front());
        cachePointCloudRightQueue.pop_front();
        pcl::moveFromROSMsg(currentPointCloudRightMsg, *pointCloudRightIn);

        if (pointCloudRightIn->is_dense == false) {
            ROS_ERROR("Point cloud is not in dense format, please remove NaN points first!");
            ros::shutdown();
        }

        pcl::PointCloud<PointXYZIRT>::Ptr pointCloudOut(new pcl::PointCloud<PointXYZIRT>());
        pointCloudOut = transformPointCloud(pointCloudRightIn, rightLidarToImu);
        pointCloudRightQueue.push_back(pointCloudOut);
        return;
    }

先进行数据的缓存,然后转成pcl格式,再调用transformPointCloud函数将雷达从雷达坐标系下转到imu坐标系下。

左侧点云为主雷达,就是之前lio-sam的雷达回调,但是多了个先转到imu坐标系下,与点云合并这2个操作。

其中合并点云的代码如下所示

    void mergePointCloud()
    {
        std::lock_guard<std::mutex> lock1(veloLock);

        if(pointCloudLeftQueue.size() > 3 && pointCloudRightQueue.size() > 3)
        {
            pointCloudLeft = std::move(pointCloudLeftQueue.front());
            pointCloudLeftQueue.pop_front();
            pointCloudRight = std::move(pointCloudRightQueue.front());
            pointCloudRightQueue.pop_front();
            *pointCloudFull = *pointCloudLeft + *pointCloudRight;
        }
        else
        {
            ROS_DEBUG("Waiting for point cloud data ...");
            return;
        }
    }

5.5 EKF节点替换

原版的LIO-SAM使用EKF节点输出gps数据转换的Odometry。

现在修改成使用原始GNSS的数据,进行转换,输出里程计以供mapOptmization节点使用。

转换的顺序如下:LLA --> ECEF --> ENU,坐标系示意图如下
在这里插入图片描述
最终得到ENU系下的gps坐标,代码如下

//  convert  LLA to XYZ
Eigen::Vector3d lla = gtools.GpsMsg2Eigen(*msg);
Eigen::Vector3d ecef = gtools.LLA2ECEF(lla);
Eigen::Vector3d enu = gtools.ECEF2ENU(ecef);

也可以使用GeographicLib库替换,代码非常简单

GeographicLib::LocalCartesian geoConverter;
 //初始化
if(!init)
{
	geoConverter.Reset(gps_msg_ptr->latitude, gps_msg_ptr->longitude, gps_msg_ptr->altitude);
	init = true;
}

geoConverter.Forward(gps_msg_ptr->latitude, gps_msg_ptr->longitude, gps_msg_ptr->altitude

5.6 输出轨迹

为了评估建图效果,需要将建图轨迹输出并和真值对比。所以代码里添加了将优化后的轨迹输出的功能。

具体函数如下

    // 输出轨迹到txt
    void saveGlobalPath() 
    {
      std::string lio_sam_path = ros::package::getPath("lio_sam");
      int npos_1 = lio_sam_path.find_last_of("/");
      std::string path = lio_sam_path.substr(0, npos_1);
      int npos_2 = path.find_last_of("/");
      // src文件夹
      std::string src_path = path.substr(0, npos_2);

      std::ofstream tum_pose(src_path + "/doc/mapping_results" +
                          "/tum_lio_sam_pose.txt");
      tum_pose.setf(std::ios::scientific, std::ios::floatfield);
      for (auto ite = globalPath.poses.begin(); ite != globalPath.poses.end();
           ite++) {
        geometry_msgs::PoseStamped pose_stamped = *ite;
        // tum格式的轨迹
        tum_pose << pose_stamped.header.stamp << " "
              << pose_stamped.pose.position.x << " "
              << pose_stamped.pose.position.y << " "
              << pose_stamped.pose.position.z << " "
              << pose_stamped.pose.orientation.x << " "
              << pose_stamped.pose.orientation.y << " "
              << pose_stamped.pose.orientation.z << " "
              << pose_stamped.pose.orientation.w << std::endl;
      }
      tum_pose.close();
    }

这个函数会在结束程序的时候执行,也就是按 ctrl c 之后才会执行。保存轨迹的目录是 src/doc/mapping_results 文件夹里,保存的文件名是 tum_lio_sam_pose.txt 。

5.7 代码中一些其他的改动

  • 注释掉了运动畸变去除的代码
  • 对平移与旋转的预测部分的代码进行了更改,但是还存在一些问题
  • 对imu的频率,是否使用里程计,是否使用gps,添加了参数控制是否使用
  • 加入了左右激光雷达到IMU的外参的参数

6 待优化与实现项

6.1 待优化项

  • 计算time字段,然后进行运动畸变的去除
  • 平移与旋转的预测部分的代码还存在一些问题
  • 解决imu的零偏问题,初始时进行零偏估计
  • 添加GPS约束后初始一段时间内偶发不收敛的情况,这是个待修复的bug
  • Urban08这个数据集的最后会出现高度差,这时回环找不到,就优化不过来,需要解决

6.2 待实现项

如果哪位同学下载了Kaist的别的数据集,可以帮忙测试下,别的数据集需要改一下 LIO-SAM/config/params.yaml 中的雷达到imu的坐标变换,如果做的话可以加我微信,一起聊聊。

Contributors

这篇文章的代码实现是由 赵焕峰,周勇,李维 三位同学完成的,感谢这两位同学的贡献。

结语

这篇文章的代码其实早都写完了,但是一直没写文章。一方面是工作事情很多,下班也晚,一方面也是自己懒了。

接下来的计划是通过这个不太完美的地图跑一下定位。

先从odom与imu的融合开始。

REFERENCES

  • 1 KAIST数据集转换为rosbag
  • 2 从零开始学定位 — 基于LIO-SAM的建图
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

从零开始学定位 --- 使用kaist数据集进行LIO-SAM建图 的相关文章

  • gperftools

    gperftools 实现了更高性能的多线程的malloc 实现 增加了极好的性能分析工具 gperftools 的前身是 pprof https github com google pprof sudo apt get install a
  • RDMA 设备查看

    1硬件检测 1 1检查硬件是否安装 确认硬件已安装 lspci tvm grep Mellanox 查看OFED驱动版本命令 如果没有驱动可以参考 https km sankuai com page 335338645 安装 rpm qa
  • spark 转换tfrecord 成parquet格式

    读取tfrecord 成parquet文件格式 read tfrecord py coding utf 8 34 34 34 读取tfrecord生成parquet文件格式 34 34 34 import os import time im
  • ffmpeg压缩视频

    安装ffmpeg conda install c conda forge x264 61 61 39 1 161 3030 39 ffmpeg 61 4 3 2 压缩mov视频 ffmpeg i movie mov c v libx264
  • AI行动,解放做表打工人

    1 atomecho 插件介绍 如果你是个 需要做财报 数据新闻的冤种 xff1b 或者是 网上有的我都想要 的囤积狂魔 xff1b 或是沉迷 Ctrl 43 C Ctrl 43 V 的做表工具人 那你一定不陌生 对不上的格式 找不到的数据
  • golang高性能rocksdb参数配置

    golang高性能rocksdb参数配置 import 34 errors 34 34 log 34 34 monorepo service autotable comm grocksdb 34 34 strings 34 34 githu
  • Linux doc和docx转换pdf

    准备工作 服务器安装libreoffice apt get install libreoffice 安装完成libreoffice后 xff0c 测试是否安装成功 soffice h 例子 把 tmp test docx 转换成 tmp t
  • 多个硬盘挂载到同一个目录

    同一目录无法重复挂载 xff0c 后挂载的会覆盖之前挂载的磁盘 但是现在需要将4块磁盘并行挂载 xff0c 该如何操作呢 xff1f 将2块磁盘合并到一个逻辑卷 进行挂载 基本知识 基本概念PV Physical Volume 物理卷物理卷
  • LeetCode 跳跃游戏 题解

    题述 xff1a 给定一个非负整数数组 nums xff0c 你最初位于数组的 第一个下标 数组中的每个元素代表你在该位置可以跳跃的最大长度 判断你是否能够到达最后一个下标 思路 xff1a 阅读题目我们可以发现只要数组里面没有0 我们就一
  • #error This file was generated by a newer version of protoc which is 【protoc版本问题】

    在github上下载自己适合的protoc版 xff08 我的环境是ubuntu18 04 ros melodic版本 xff09 gazebo9对应的最低版本protoc为3 0 0 我之前版本为3 14 0会提示目前文件由旧版本生成 x
  • Dispatcher.BeginInvoke()方法使用不当导致UI界面卡死的原因分析

    前段时间 xff0c 公司同事开发了一个小工具 xff0c 在工具执行过程中 xff0c UI 界面一直处于卡死状态 通过阅读代码发现 xff0c 主要是由于 Dispatcher BeginInvoke 方法使用不当导致的 本文将通过一个
  • List的Clear方法与RemoveAll方法用法小结

    示例代码 using System using System Collections Generic namespace ListClearExp class Program static void Main string args Lis
  • 利用C#访问注册表获取软件的安装路径

    绝大多数软件 xff0c 基本上都会在注册表中记录自己的名字和安装路径信息 在注册表中记录这些信息的位置是 xff1a HKEY LOCAL MACHINE SOFTWARE Microsoft Windows CurrentVersion
  • 使用ValidationRule类来检查用户输入的有效性

    1 新建WPF应用程序ValidationRuleExp 整个程序的结构如下图所示 程序运行起来后的效果如下图所示 用户操作程序时 xff0c 先输入固话 手机 Email 个人网站等信息 xff0c 再点击右侧的 点我记住你 按钮 xff
  • 关闭窗体后,进程仍然在运行的问题重现与解决

    1 问题陈述 在开发中 xff0c 遇到这样一个问题 xff1a 点击程序主窗体右上角的叉号关闭应用程序后 xff0c 程序的进程却没有关闭 通过查阅资料 xff0c 了解到 xff0c 产生此类问题的原因主要有以下两点 xff1a 1 x
  • Python判断一个字符串是否包含子串的几种方法

    1 使用成员操作符 in span class hljs prompt gt gt gt span s 61 span class hljs string 39 nihao shijie 39 span span class hljs pr
  • easyui-datagrid获取行和列数据

    1 获取当前行 span class hljs keyword var span row 61 span class hljs string 39 dg 39 span datagrid span class hljs string 39
  • No plugin found for prefix ‘tomcat7’ in the current project and in the plugin groups

    idea中开发javaweb应用 xff0c 使用mvn tomcat7 run命令运行应用时 xff0c 需要配置tomcat的maven插件 在没有配置的情况下会出现下面的错误提示 ERROR No plugin found for p
  • C#中的IComparable和IComparer接口

    C 中 xff0c 自定义类型 xff0c 支持比较和排序 xff0c 需要实现IComparable接口 IComparable接口存在一个名为CompareTo 的方法 xff0c 接收类型为object的参数表示被比较对象 xff0c
  • LeetCode Nim游戏 题解

    题述 xff1a 你和你的朋友 xff0c 两个人一起玩 Nim 游戏 xff1a 桌子上有一堆石头 你们轮流进行自己的回合 xff0c 你作为先手 每一回合 xff0c 轮到的人拿掉 1 3 块石头 拿掉最后一块石头的人就是获胜者 假设你

随机推荐

  • C#接口汇总

    1 IComparable和IComparer接口 用于比较和排序 IComparable 可比较的 xff0c 实现该接口的类 xff0c 便具有 可比较的 特性 IComparer 比较器 xff0c 实现该接口的类 xff0c 是一个
  • Python操作环境变量

    1 使用os读取环境变量 import os os getenv 39 path 39 os environ get 39 path 39 os environ 39 path 39 2 遍历打印所有环境变量 通过访问os environ可
  • 教程 | 阿克曼结构移动机器人的gazebo仿真(一)

    第一章 从SOLIDWORKS中导出URDF 二轮差速小车已经完结 接下去要进入阿克曼结构移动机器人的仿真 阿克曼小车的结构也就是我们看到最多的应用最广的车型 xff0c 也称为car like robot 在这里先挖下一个大坑 xff0c
  • TIANBOT MINI机器人使用blender进行贴图并导出详细教程

    很多小伙伴在看一些仿真视频中会看到 xff0c 仿真模型栩栩如生 xff0c 但是我们自己导出的模型总是不堪入目 xff0c 哪是因为你还没学会贴图 xff0c 下面我来教大家一步一步怎么学会贴图 首先我们打开blender并设置好简体中文
  • 什么是ROS2GO随身系统?

    随着ROS xff08 Robot Operating System xff09 机器人操作系统的越来越热 xff0c 大家都跃跃欲试 想一睹ROS的风采 xff0c 感受ROS的魅力 但是挡在初学者面前的第一个难题就是如何在Ubuntu系
  • 教程 | 阿克曼结构移动机器人的gazebo仿真(二)

    第二章 配置xacro文件 0 前言 上一节已经将urdf导出来了 xff0c 这一节需要配置一下xacro文件 先看一下导出的功能包在gazebo以及rviz中显示的效果 将功能包放进工作空间进行编译 xff0c source一下环境 x
  • 教程 | 阿克曼结构移动机器人的gazebo仿真(三)

    第三章 让小车动起来 1 配置controller 在tianracer description功能包新建config文件夹时 xff0c 我们可以通过一个yaml文件smart control config yaml来声明我们所需要的co
  • 教程 | 阿克曼结构移动机器人的gazebo仿真(五)

    第四章 用xacro优化URDF并配置gazebo仿真插件 1 前言 上节用简易模型写了一个小车的URDF代码 xff0c 这一节将用xacro对其进行优化 xff0c 这里我并不打算用宏对参数进行封装 xff0c 因为我个人觉得这样看起来
  • 教程 | Jetson Xavier NX 开发板强化学习环境配置流程

    一 基本介绍 NX开发板 全名Jetson Xavier NX xff08 后简称为NX xff09 xff0c 是NVIDIA英伟达提供的模组和开发者套件 xff0c 保持Jetson Nano小巧尺寸的同时拥有相当于Jetson TX2
  • 免费教程·开源 | 从零开始制作ROS无人竞速车RACECAR教程

    一 课程前提 自动驾驶汽车即将成为交通出行的主流工具之一 xff0c 它以计算机 现代汽车产业技术为基础 xff0c 以数字化 智能化为依托实现自动化驾驶 xff0c 学习自动驾驶需要了解架构 环境感知 行为决策 规划路径 xff0c 多传
  • c++ 继承 学习总结3 继承中父类和子类同名非静态成员或者同名静态成员的处理方式

    1 继承中父类和子类有同名非静态成员的处理方式 eg include lt iostream gt using namespace std class Base public Base m A 61 100 void func cout l
  • 2022ROS暑期学校暨人工智能与机器人论坛报名及日程安排

    机器人操作系统 ROS 暑期学校自2015年举办以来 xff0c 被中国机器人业界和学界 xff0c 以及ROS开源基金会誉为除了ROSCon之外规模最大 参与人数最多 最成功的ROS线下活动 过去八年 xff0c 共吸引了全国300多所高
  • MATLAB Simulink开发ROS无人车与机器人应用 详细教程

    引言 xff1a MATLAB在机器人中的应用 现在大多数机器人开发者都会选择ROS xff0c 在ROS整个框架下 调包 极其容易 很多ROS开发者热衷于 调包 来实现功能 xff0c 却难以在机器人学的理论知识上有所突破 MATLAB的
  • DE1-SOC入门之Linux开发环境搭建

    入手DE1 SOC这块FPGA也有两三个月了 xff0c 将友晶提供的入门学习例程 代码等摸索了一下 xff0c 感觉正常的fpga和arm之间的通信 控制已经没多大问题了 可是很多时候 xff0c 事情没有自己想的那么简单 现在接手的项目
  • sensor_msgs/NavSatFix Message

    1 sensor msgs NavSatStatus Message http docs ros org en api sensor msgs html msg NavSatStatus html Navigation Satellite
  • 零基础如何入门激光SLAM

    零基础如何入门激光SLAM 最近有几个人加我 xff0c 都说是刚开始学激光slam xff0c 基本都是研一 xff0c 也有一些大四的 xff08 大四的都开始学SLAM了 xff01 xff09 情况也都差不多 xff0c 有的是课题
  • 从零开始搭二维激光SLAM --- 栅格地图的构建

    上周搬家 导致这篇文章更新的慢了点 之前的文章我们都是通过scan to scan的方式进行位姿变换的计算 接下来的文章将带领大家体验scan to map的计算位姿变换的方式 首先 来简要介绍一下什么是map 1 地图与占用栅格地图 1
  • 从零开始搭二维激光SLAM --- 基于gtsam的后端优化的代码实现

    上一篇文章我们分析了如何使用ceres进行位姿图的优化 这篇文章来讲一下如何使用gtsam进行位姿图的优化 1 gtsam简介 gtsam是最近几年火起来的一个优化库 GTSAM xff08 Georgia Tech Smoothing a
  • 从零开始学定位 --- kaist数据集体验

    1 Kaist数据集简介 选择数据集选择了好几天 xff0c 最终选择了kaist数据集 xff0c 这个数据集中有 轮速计 xff0c imu gps 16线雷达 xff0c 这些传感器满足了我认为多传感器融合定位的需要 简要介绍一下Ka
  • 从零开始学定位 --- 使用kaist数据集进行LIO-SAM建图

    之前的文章只是将数据的雷达在rviz中进行可视化了 xff0c 并没有实际用起来 这篇文章将使用Kaist Urban08 数据使用LIO SAM进行三维点云地图的构建 1 clone 工程 仓库的地址是 https github com