位置: IT常识 - 正文

KITTI数据集详解(timit数据集)

编辑:rootadmin
KITTI数据集详解 KITTI数据集详解数据采集车

推荐整理分享KITTI数据集详解(timit数据集),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:semantickitti数据集下载,tid2013数据集,kitti数据集介绍,semantickitti数据集下载,timit数据集,kitty 数据集,semantickitti数据集下载,kitty 数据集,内容如对您有帮助,希望把文章链接给更多的朋友!

以下图片来自KITTI官网:KITT官方link Kitti的数据采集车,顶上是一个64线的velodyne激光雷达,前面有四个摄像头分别是cam0~3,其中0和1是灰度相机,2和3是rgb相机。激光雷达的坐标系遵循右手定则,而相机坐标系遵循左手定则,如图所示。

为了生成双目立体图像,相同类型的摄像头相距54cm安装。由于彩色摄像机的分辨率和对比度不够好,所以还使用了两个立体灰度摄像机,它和彩色摄像机相距6cm安装。

四个相机经过了严格的位置矫正,保证yz同值,x同轴,如果想进行lidar与camera的坐标系转换,默认以cam0为基准,即如果是cam0转到velodyne,就直接转,如果是cam其他转velodyne,则先要转到cam0,再转到velodyne,相机和激光的坐标转换后续会详细说明。

目录结构

常见的目录结构如下(参照Det3d):

└── KITTI_DATASET_ROOT ├── training <-- 7481 train data | ├── image_2 <-- for visualization | ├── calib | ├── label_2 | ├── velodyne | └── velodyne_reduced <-- empty directory └── testing <-- 7580 test data ├── image_2 <-- for visualization ├── calib ├── velodyne └── velodyne_reduced <-- empty directory

image_2即2号彩色相机所拍摄的图片(.png); calib对应每一帧的外参(.txt); label_2是每帧的标注信息(.txt); velodyne是Velodyne64所得的点云文件(.bin)

视算法任务而定,有些文件夹可能用不到,比如velodyne_reduced,这里是图像和点云融合算法中,裁剪得到的图像范围内的点云文件,如果是单lidar的3D目标检测,这个就用不到了,另外,有一些算法有自己独特的数据增强方式或者数据加载方式(如SECOND),会生成一些.pkl的数据索引字典,或者gt_base等增强数据库。

image_2和velodyne很好理解,就是图像和点云,都能可视化的,下面详细讲讲label和calib。

文件详解label文件

下面以000000.txt为例: Pedestrian 0.00 0 -0.20 712.40 143.00 810.73 307.92 1.89 0.48 1.20 1.84 1.47 8.41 0.01

第1个字符串Pedestrian:物体类别:‘Car’, ‘Van’, ‘Truck’,‘Pedestrian’, ‘Person_sitting’, ‘Cyclist’,‘Tram’, ‘Misc’ or ‘DontCare’,共有9类,但常常拿来作为算法之间比较指标的是car、pedestrian、cyclist这三个。注意最后一个’DontCare’标签表示该区域没有被标注,比如由于目标物体距离激光雷达太远。为了防止在评估过程中(主要是计算precision),将本来是目标物体但是因为某些原因而没有标注的区域统计为假阳性(false positives),评估脚本会自动忽略’DontCare’区域的预测结果。

第二个数0.00:代表物体是否被截断(指物体是否有部分处于图像边界之外,不是遮挡),从0(非截断)到1(截断)浮动,其中1截断指离开图像边界的对象。

第三个数0:代表物体是否被遮挡,整数0,1,2,3表示被遮挡的程度。 0:完全可见 1:小部分遮挡 2:大部分遮挡 3:完全遮挡(unknown)

第四个数**-0.20**:alpha,物体的观察角度,范围:-pi~pi 是在相机坐标系下,以相机原点为中心,相机原点到物体中心的连线为半径,将物体绕相机y轴旋转至相机z轴,此时物体方向与相机x轴的夹角。官方定义写老长,看下面这个图就一目了然了。

第四个数就是图中的alpha(注意不是theta),我们可以通过几何运算得到alpha和theta的关系: 由于r_y + pi/2 -theta = alpha +pi/2(即图中紫色的角是相等的) 等式两边同时减去pi/2,得到:alpha = r_y - theta

KITTI数据集详解(timit数据集)

第5~8这四个数712.40 143.00 810.73 307.92:物体的2维边界框xmin,ymin,xmax,ymax,坐标系是在camera坐标系下。

第9~11这三个数1.89 0.48 1.20:3维物体的尺寸,高、宽、长(单位:米)

第12~14这三个数1.84 1.47 8.41:3维物体中心的位置xyz(依然是在camera坐标系下)

第15个数0.01:3维物体的空间方向:rotation_y,依然是在camera坐标系下,物体的全局方向角(物体前进方向与相机坐标系x轴的夹角,也就是左图中的r_y),范围:-pi~pi

第16个数:检测的置信度,这个数据只在测试集的数据中有,我这里给出的是训练集,所以没有第16个数。

注意:1、默认的长度单位是米,角度单位是弧度 2、各个坐标均在camrea坐标系下 3、区分第四个数和第十五个数,一个是alpha,一个是r_y

calib文件

数据太长了,下面是截图,注意源数据没有空行,我为了方便观看,加了空行,使用的时候要去掉空行,每个txt文件中有7个矩阵,我用红框框出来了。 P0 – P3(3x4):就是对应的cam0 ~ cam3这四个相机矫正后的投影矩阵,每个都是3*4的矩阵(有关投影矩阵的具体知识,可以看网址:投影矩阵),每个矩阵的形式如下: [fu 0 cu -fubx 0 fv cv 0 0 0 1 0] 其中bx指的是相对于0号摄像头(cam0默认是参考摄像头)的基准值,单位米。

R0_rect(3x3):矫正后的相机矩阵,注意在使用的时候需要reshape成4x4,具体方法是在R(4, 4)处添1,其余6个位置添0。

Tr_velo_to_cam(3x4):velodyne到camera的旋转平移矩阵,此矩阵包含两个模块,左侧3x3的旋转矩阵和右侧13的平移向量,具体使用时也要reshape成44,具体方法是在最后添加一行(0,0,0,1)。

Tr_imu_to_velo(3x4):IMU到velodyne的旋转平移矩阵,结构和使用方法跟Tr_velo_to_cam类似。

calib的使用方法

要将Velodyne坐标中的点x投影到左侧的彩色图像中y:

使用公式:y = P2 * R0_rect *Tr_velo_to_cam * x

将Velodyne坐标中的点投影到其他彩色图像中,只需要替换上面的P2,比如投影到右侧彩色图像中:

使用公式:y = P3 * R0_rect *Tr_velo_to_cam * x

Tr_velo_to_cam * x:是将Velodyne坐标中的点x投影到编号为0的相机(参考相机)坐标系中

R0_rect *Tr_velo_to_cam * x:是将Velodyne坐标中的点x投影到编号为2的相机(参考相机)坐标系中

P2 * R0_rect *Tr_velo_to_cam * x:是将Velodyne坐标中的点x投影到编号为2的相机(参考相机)坐标系中,再投影到编号为2的相机(左彩色相机)的照片上(相机坐标系转像素坐标系)

注意:所有矩阵都存储在主行中,即第一个值对应于第一行。 R0_rect包含一个3x3矩阵,需要将其扩展为4x4矩阵,方法是在右下角添加1,在其他位置添加0。 Tr_xxx是一个3x4矩阵(R | t),需要以相同的方式扩展到4x4矩阵。

本文链接地址:https://www.jiuchutong.com/zhishi/295341.html 转载请保留说明!

上一篇:React函数式组件传值(父子,兄弟,祖先等)以及父子之间方法的调用。(react函数组件useeffect)

下一篇:vue使用scss(vue使用scss报错)

  • 企业微信红包不领取会被退回吗(企业微信红包不领取多久退回)

    企业微信红包不领取会被退回吗(企业微信红包不领取多久退回)

  • WIN10系统如何隐藏任务栏图标(win10系统如何隐藏盘符)

    WIN10系统如何隐藏任务栏图标(win10系统如何隐藏盘符)

  • 美团如何绑定银行卡(美团如何绑定银行卡支付)

    美团如何绑定银行卡(美团如何绑定银行卡支付)

  • QQ关联怎么看微信聊天记录(怎么看到qq关联号的聊天)

    QQ关联怎么看微信聊天记录(怎么看到qq关联号的聊天)

  • 启动u盘的快捷键是什么(启动u盘快捷键是哪个键?)

    启动u盘的快捷键是什么(启动u盘快捷键是哪个键?)

  • 亲情号付款后退款退在哪里(亲情号付款退款后额度会退回吗)

    亲情号付款后退款退在哪里(亲情号付款退款后额度会退回吗)

  • airpods重置后名字会变吗(airpods重置后名字没有改变)

    airpods重置后名字会变吗(airpods重置后名字没有改变)

  • 手机进水主板烧了症状(手机进水主板烧坏了可以修好吗?)

    手机进水主板烧了症状(手机进水主板烧坏了可以修好吗?)

  • 苹果还原所有设置是什么意思(苹果还原所有设置)

    苹果还原所有设置是什么意思(苹果还原所有设置)

  • 电脑怎么下载表格(电脑怎么下载表格制作软件)

    电脑怎么下载表格(电脑怎么下载表格制作软件)

  • qq好友动态背景图片怎么设置(qq好友动态背景图片怎么换)

    qq好友动态背景图片怎么设置(qq好友动态背景图片怎么换)

  • v1963a是什么手机(v1963a是什么手机多少钱)

    v1963a是什么手机(v1963a是什么手机多少钱)

  • 剪映导出失败什么原因(剪映提示导出失败)

    剪映导出失败什么原因(剪映提示导出失败)

  • tplogincn初始密码是多少(tplogincn密码多少)

    tplogincn初始密码是多少(tplogincn密码多少)

  • 手机大众点评d币在哪里(手机大众点评有什么用)

    手机大众点评d币在哪里(手机大众点评有什么用)

  • 淘宝消息全部发不出去(淘宝发的消息多久可以撤回)

    淘宝消息全部发不出去(淘宝发的消息多久可以撤回)

  • 苹果11支持双卡双待双通吗(苹果11支持双卡怎么放)

    苹果11支持双卡双待双通吗(苹果11支持双卡怎么放)

  • airpods充了24小时会坏吗(airpods充了一晚上电没事吧)

    airpods充了24小时会坏吗(airpods充了一晚上电没事吧)

  • qc35一代和二代买哪个(qc35一代和二代耳罩区别)

    qc35一代和二代买哪个(qc35一代和二代耳罩区别)

  • 设置不拉黑拒绝收信息(不拉黑对方怎么可以拒接电话)

    设置不拉黑拒绝收信息(不拉黑对方怎么可以拒接电话)

  • 苹果xr怎么开机啊(iphone不开机)

    苹果xr怎么开机啊(iphone不开机)

  • 华为桌面时间没有了怎么办(华为桌面时间没什么出来)

    华为桌面时间没有了怎么办(华为桌面时间没什么出来)

  • vivouz3与vivoz3x对比(vivoz3和vivou3x哪个好)

    vivouz3与vivoz3x对比(vivoz3和vivou3x哪个好)

  • 完美解决 Linux 和 Windows 双启动带来的时间同步问题(完美解决怠速抖动加油就平稳)

    完美解决 Linux 和 Windows 双启动带来的时间同步问题(完美解决怠速抖动加油就平稳)

  • KHALMNPR.exe是什么进程 有什么作用 KHALMNPR进程查询(kzip_main.exe是什么)

    KHALMNPR.exe是什么进程 有什么作用 KHALMNPR进程查询(kzip_main.exe是什么)

  • Springboot怎么实现restfult风格Api接口(springboot -d)

    Springboot怎么实现restfult风格Api接口(springboot -d)

  • 应税劳务的主要成本包括
  • 增值税存量和增量留抵退税
  • 房地产房屋质量检测
  • 税务系统重置密码
  • 以前年度损益科目核算业务
  • 取暖费扣个人所得税吗
  • 合同能源管理项目账务处理
  • 房地产怎么计算需要交多少税
  • 小规模纳税人出租
  • 处置固定资产取得的收益属于利得吗
  • 可以把两张发票合写在记账凭证上吗
  • 地税没报税怎么办
  • 普通发票跨年作废有影响吗
  • 哪些员工福利可以让企业合理避税
  • 地税印花税税率是多少
  • 印花税的计税依据含增值税吗
  • 单位为员工缴纳社保分录
  • 福利费进项税额转出会计分录
  • 对外捐赠视同销售分录
  • 有哪些固定资产可以抵税
  • 购买融资租赁资产
  • 计提工资当月要结转吗?
  • win11压缩文件
  • 电脑屏幕保护不能设置
  • macbook触摸板如何拖动
  • 出租的设备
  • 笔记本电脑预装
  • 天猫收取的三大费用
  • 检验费用会计分录
  • PHP:Memcached::getVersion()的用法_Memcached类
  • php ftp上传文件
  • 销售方红字发票账务处理
  • 软件开发中的业务一般指什么
  • php rediscluster
  • 拉姆绍在哪里
  • 使用php进行mysql数据库编程的基本步骤
  • 机票报销属于什么费
  • yolov5目标检测流程图
  • html+php
  • extrim命令详解
  • 货款收不回来了怎么做账
  • 退回材料的会计分录
  • 交通费中的高速费指什么
  • 办公费用开专票可以抵扣吗
  • 总分类科目的名称和核算内容
  • 水利基金可以不计提吗
  • sql2000错误9003
  • SqlServer 2005 T-SQL Query 学习笔记(2)
  • SQL Server Management Studio教程
  • 业务招待费的所得税扣除
  • 其他应收款和应收账款一样吗
  • 为什么出口退税是贷方
  • 代驾服务费属于哪个税收编码
  • 小规模公司怎样添加员工
  • 股东是否实缴出资的举证责任
  • 固定资产清理时累计折旧提完了怎么账务处理
  • 中小型企业产品定位方案
  • 应收账款坏账准备的会计分录
  • 固定资产当月计提
  • 产品成本核算有多条原则和要求
  • mysql优化表命令
  • 数据库表的行数
  • linux系统的介绍
  • ubuntu安装office2019
  • linux编译安装怎么卸载
  • scureapp.exe - scureapp是什么进程 有什么用
  • win7使用技巧
  • win8.1系统更新
  • javascript基础
  • 我今天抽6
  • linux shell语句
  • Node.js中的construct
  • linux压缩tar文件命令
  • for语句中的++i
  • [置顶]马粥街残酷史
  • [置顶]马粥街残酷史
  • java项目怎么变成web项目
  • 广西电票科技有限公司
  • 园区地税局在哪里
  • 怎么申请企业信用修复
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设