位置: IT常识 - 正文

KITTI数据集详解(timit数据集)

编辑:rootadmin
KITTI数据集详解 KITTI数据集详解数据采集车

推荐整理分享KITTI数据集详解(timit数据集),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:semantickitti数据集下载,tid2013数据集,kitti数据集介绍,semantickitti数据集下载,timit数据集,kitty 数据集,semantickitti数据集下载,kitty 数据集,内容如对您有帮助,希望把文章链接给更多的朋友!

以下图片来自KITTI官网:KITT官方link Kitti的数据采集车,顶上是一个64线的velodyne激光雷达,前面有四个摄像头分别是cam0~3,其中0和1是灰度相机,2和3是rgb相机。激光雷达的坐标系遵循右手定则,而相机坐标系遵循左手定则,如图所示。

为了生成双目立体图像,相同类型的摄像头相距54cm安装。由于彩色摄像机的分辨率和对比度不够好,所以还使用了两个立体灰度摄像机,它和彩色摄像机相距6cm安装。

四个相机经过了严格的位置矫正,保证yz同值,x同轴,如果想进行lidar与camera的坐标系转换,默认以cam0为基准,即如果是cam0转到velodyne,就直接转,如果是cam其他转velodyne,则先要转到cam0,再转到velodyne,相机和激光的坐标转换后续会详细说明。

目录结构

常见的目录结构如下(参照Det3d):

└── KITTI_DATASET_ROOT ├── training <-- 7481 train data | ├── image_2 <-- for visualization | ├── calib | ├── label_2 | ├── velodyne | └── velodyne_reduced <-- empty directory └── testing <-- 7580 test data ├── image_2 <-- for visualization ├── calib ├── velodyne └── velodyne_reduced <-- empty directory

image_2即2号彩色相机所拍摄的图片(.png); calib对应每一帧的外参(.txt); label_2是每帧的标注信息(.txt); velodyne是Velodyne64所得的点云文件(.bin)

视算法任务而定,有些文件夹可能用不到,比如velodyne_reduced,这里是图像和点云融合算法中,裁剪得到的图像范围内的点云文件,如果是单lidar的3D目标检测,这个就用不到了,另外,有一些算法有自己独特的数据增强方式或者数据加载方式(如SECOND),会生成一些.pkl的数据索引字典,或者gt_base等增强数据库。

image_2和velodyne很好理解,就是图像和点云,都能可视化的,下面详细讲讲label和calib。

文件详解label文件

下面以000000.txt为例: Pedestrian 0.00 0 -0.20 712.40 143.00 810.73 307.92 1.89 0.48 1.20 1.84 1.47 8.41 0.01

第1个字符串Pedestrian:物体类别:‘Car’, ‘Van’, ‘Truck’,‘Pedestrian’, ‘Person_sitting’, ‘Cyclist’,‘Tram’, ‘Misc’ or ‘DontCare’,共有9类,但常常拿来作为算法之间比较指标的是car、pedestrian、cyclist这三个。注意最后一个’DontCare’标签表示该区域没有被标注,比如由于目标物体距离激光雷达太远。为了防止在评估过程中(主要是计算precision),将本来是目标物体但是因为某些原因而没有标注的区域统计为假阳性(false positives),评估脚本会自动忽略’DontCare’区域的预测结果。

第二个数0.00:代表物体是否被截断(指物体是否有部分处于图像边界之外,不是遮挡),从0(非截断)到1(截断)浮动,其中1截断指离开图像边界的对象。

第三个数0:代表物体是否被遮挡,整数0,1,2,3表示被遮挡的程度。 0:完全可见 1:小部分遮挡 2:大部分遮挡 3:完全遮挡(unknown)

第四个数**-0.20**:alpha,物体的观察角度,范围:-pi~pi 是在相机坐标系下,以相机原点为中心,相机原点到物体中心的连线为半径,将物体绕相机y轴旋转至相机z轴,此时物体方向与相机x轴的夹角。官方定义写老长,看下面这个图就一目了然了。

第四个数就是图中的alpha(注意不是theta),我们可以通过几何运算得到alpha和theta的关系: 由于r_y + pi/2 -theta = alpha +pi/2(即图中紫色的角是相等的) 等式两边同时减去pi/2,得到:alpha = r_y - theta

KITTI数据集详解(timit数据集)

第5~8这四个数712.40 143.00 810.73 307.92:物体的2维边界框xmin,ymin,xmax,ymax,坐标系是在camera坐标系下。

第9~11这三个数1.89 0.48 1.20:3维物体的尺寸,高、宽、长(单位:米)

第12~14这三个数1.84 1.47 8.41:3维物体中心的位置xyz(依然是在camera坐标系下)

第15个数0.01:3维物体的空间方向:rotation_y,依然是在camera坐标系下,物体的全局方向角(物体前进方向与相机坐标系x轴的夹角,也就是左图中的r_y),范围:-pi~pi

第16个数:检测的置信度,这个数据只在测试集的数据中有,我这里给出的是训练集,所以没有第16个数。

注意:1、默认的长度单位是米,角度单位是弧度 2、各个坐标均在camrea坐标系下 3、区分第四个数和第十五个数,一个是alpha,一个是r_y

calib文件

数据太长了,下面是截图,注意源数据没有空行,我为了方便观看,加了空行,使用的时候要去掉空行,每个txt文件中有7个矩阵,我用红框框出来了。 P0 – P3(3x4):就是对应的cam0 ~ cam3这四个相机矫正后的投影矩阵,每个都是3*4的矩阵(有关投影矩阵的具体知识,可以看网址:投影矩阵),每个矩阵的形式如下: [fu 0 cu -fubx 0 fv cv 0 0 0 1 0] 其中bx指的是相对于0号摄像头(cam0默认是参考摄像头)的基准值,单位米。

R0_rect(3x3):矫正后的相机矩阵,注意在使用的时候需要reshape成4x4,具体方法是在R(4, 4)处添1,其余6个位置添0。

Tr_velo_to_cam(3x4):velodyne到camera的旋转平移矩阵,此矩阵包含两个模块,左侧3x3的旋转矩阵和右侧13的平移向量,具体使用时也要reshape成44,具体方法是在最后添加一行(0,0,0,1)。

Tr_imu_to_velo(3x4):IMU到velodyne的旋转平移矩阵,结构和使用方法跟Tr_velo_to_cam类似。

calib的使用方法

要将Velodyne坐标中的点x投影到左侧的彩色图像中y:

使用公式:y = P2 * R0_rect *Tr_velo_to_cam * x

将Velodyne坐标中的点投影到其他彩色图像中,只需要替换上面的P2,比如投影到右侧彩色图像中:

使用公式:y = P3 * R0_rect *Tr_velo_to_cam * x

Tr_velo_to_cam * x:是将Velodyne坐标中的点x投影到编号为0的相机(参考相机)坐标系中

R0_rect *Tr_velo_to_cam * x:是将Velodyne坐标中的点x投影到编号为2的相机(参考相机)坐标系中

P2 * R0_rect *Tr_velo_to_cam * x:是将Velodyne坐标中的点x投影到编号为2的相机(参考相机)坐标系中,再投影到编号为2的相机(左彩色相机)的照片上(相机坐标系转像素坐标系)

注意:所有矩阵都存储在主行中,即第一个值对应于第一行。 R0_rect包含一个3x3矩阵,需要将其扩展为4x4矩阵,方法是在右下角添加1,在其他位置添加0。 Tr_xxx是一个3x4矩阵(R | t),需要以相同的方式扩展到4x4矩阵。

本文链接地址:https://www.jiuchutong.com/zhishi/295341.html 转载请保留说明!

上一篇:React函数式组件传值(父子,兄弟,祖先等)以及父子之间方法的调用。(react函数组件useeffect)

下一篇:vue使用scss(vue使用scss报错)

  • 苹果x系统要不要更新(苹果x系统尽量不更新吗)

    苹果x系统要不要更新(苹果x系统尽量不更新吗)

  • vc++和c++区别(visualc++与c++的区别)

    vc++和c++区别(visualc++与c++的区别)

  • 快手盗别人作品的后果(快手盗别人作品举报文案模版)

    快手盗别人作品的后果(快手盗别人作品举报文案模版)

  • 怎么看苹果耳机盒子是否在充电(怎么看苹果耳机电量)

    怎么看苹果耳机盒子是否在充电(怎么看苹果耳机电量)

  • 一个手机号可以绑定几个抖音号(一个手机号可以注册两个微信吗)

    一个手机号可以绑定几个抖音号(一个手机号可以注册两个微信吗)

  • 苹果11提示更新要不要更新(苹果11提示更新App怎么设置忽略)

    苹果11提示更新要不要更新(苹果11提示更新App怎么设置忽略)

  • 微信可以拒收别人的信息吗(微信可以拒收别人的好友申请吗)

    微信可以拒收别人的信息吗(微信可以拒收别人的好友申请吗)

  • 苹果手机nfc是什么意思啊(苹果手机nfc是什么版本)

    苹果手机nfc是什么意思啊(苹果手机nfc是什么版本)

  • 网速和网线有关吗(网速跟网线有关系么)

    网速和网线有关吗(网速跟网线有关系么)

  • 爱奇艺会员怎么总是掉线(爱奇艺会员怎么登录账号)

    爱奇艺会员怎么总是掉线(爱奇艺会员怎么登录账号)

  • 手机听筒在哪里(小米手机听筒在哪里)

    手机听筒在哪里(小米手机听筒在哪里)

  • 浏览器的历史记录删了 可以找回吗(浏览器的历史记录如何恢复手机)

    浏览器的历史记录删了 可以找回吗(浏览器的历史记录如何恢复手机)

  • 苹果6s能用airpods2吗(苹果6s能用airpods pro吗)

    苹果6s能用airpods2吗(苹果6s能用airpods pro吗)

  • word无法修改内容(word无法修改内容怎么办)

    word无法修改内容(word无法修改内容怎么办)

  • 苹果xsmax支持无线充电么(iphonexsmax参数配置)

    苹果xsmax支持无线充电么(iphonexsmax参数配置)

  • 温10系统怎么连接网络(温10系统怎么连接打印机扫描)

    温10系统怎么连接网络(温10系统怎么连接打印机扫描)

  • ps怎么把图片拉大拉小(ps怎么把图片拉直)

    ps怎么把图片拉大拉小(ps怎么把图片拉直)

  • 拇信中的拇豆有啥用途(什么是拇信 它是合法的吗)

    拇信中的拇豆有啥用途(什么是拇信 它是合法的吗)

  • qq情侣空间恩爱墙在哪(qq情侣空间恩爱榜可以隐藏吗)

    qq情侣空间恩爱墙在哪(qq情侣空间恩爱榜可以隐藏吗)

  • 拼多多挖矿在哪里找(拼多多挖矿游戏怎么玩)

    拼多多挖矿在哪里找(拼多多挖矿游戏怎么玩)

  • linux文件夹怎么与远程系统同步?(linux文件夹怎么删除)

    linux文件夹怎么与远程系统同步?(linux文件夹怎么删除)

  • 前端登录退出:处理Token问题(获取、缓存、失效处理)以及代码实现(前端登录退出怎么操作)

    前端登录退出:处理Token问题(获取、缓存、失效处理)以及代码实现(前端登录退出怎么操作)

  • Vue项目如何配置、切换主题颜色(mixin + scss方式,简单高效)(vue项目如何配置启动的端口)

    Vue项目如何配置、切换主题颜色(mixin + scss方式,简单高效)(vue项目如何配置启动的端口)

  • vue3与vue2的对比(vue3与vue2的区别)

    vue3与vue2的对比(vue3与vue2的区别)

  • 建筑垃圾清运税率多少
  • 税控减免税额如何做分录
  • 合资公司注册成立流程
  • 收到电子退库的摘要怎么写
  • 小规模普票专票税率一样吗
  • 没有票据怎么要账
  • 开办费用怎么确定摊销年限及财务处理分析
  • 出口关税如何做账
  • 以现金形式发放的福利怎么入账
  • 政府扶贫支出
  • 固定资产的知识
  • 企业购进材料的会计分录
  • 未支付的款项如何做账
  • 调解书和判决书执行力度一样吗
  • 自然人股权转让要交什么税
  • 营改增后哪些进项不能抵扣
  • 汽车修理费入账
  • 福利费进项税额转出会计分录账务处理
  • 发票勾选平台显示不成功
  • 预付油卡怎么入账
  • 付款账号姓名是什么意思
  • 营改增后无形资产增加的是
  • 有销项没有进项怎么结算成本
  • 结转采购材料的实际成本会计分录怎么写
  • 单位交水费会计分录
  • 员工伙食费明细表
  • 传递优化的作用
  • s24evmon.exe - s24evmon是什么进程 有什么用
  • 电梯安装包工头赚多少
  • 公司认缴出资怎么交税
  • PHP:Memcached::getServerList()的用法_Memcached类
  • 支付宝语音提示在哪里打开
  • php对象赋值给变量
  • ubuntu设置nginx开机启动
  • php完整教程
  • 自查补缴增值税如何申报
  • 附有销售退回条款的销售中,每一资产负债表日
  • 珠穆朗玛峰的壮观
  • 建设期需要流动资金吗
  • 处理固定资产时的账务处理
  • 劳务报酬已扣税是否需报个税
  • 难以置信含义
  • php实现自动识别的方法
  • 国内来料加工会亏本吗
  • chat gpt 国内版免费手机
  • JavaScript DOM API的使用
  • 出售债券的税费会计分录
  • phpcms怎么用
  • mysql动态表单设计与实现
  • 差旅费报销金额大于实际发生金额
  • 居民和非居民企业的区别是什么
  • 分销佣金账务处理流程
  • 商品周转天数计算方法
  • 一次性付清的优缺点
  • 股份有限公司股东人数
  • 建筑图纸设计费怎么收费
  • 发票几个月内可以红冲
  • 建筑业营改增后税务问题
  • 现金投资属于什么会计科目
  • 建筑业老项目发展现状
  • 通过备份记录获取文件
  • linux系统啥样
  • 如何关掉数据
  • linux ./文件
  • Linux系统中配置网络
  • linux如何修改网关地址
  • jquery弹出框样式大全
  • canvas动态绘制简单gif
  • javascriptz
  • node stream原理
  • setcontentview报错
  • 在dos中文件是以什么目录结构
  • js设置页面大小
  • js使用正则表达式对json对象的校验
  • javascript的核心组成部分
  • Django1.7+python 2.78+pycharm配置mysql数据库
  • 纳税申报期过了怎么处理
  • 营商环境法治保障服务
  • 建筑增值税税率历次调整
  • 委托贷款的手续费
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设