位置: IT常识 - 正文

【MOT】目标追踪DeepSORT与ByteTrack(目标追踪模型)

编辑:rootadmin
【MOT】目标追踪DeepSORT与ByteTrack 基础知识

推荐整理分享【MOT】目标追踪DeepSORT与ByteTrack(目标追踪模型),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:目标追踪的原则,目标追踪工具,目标追踪的原则,目标追踪的具体内容是,目标追踪器,目标追踪器,mosse目标跟踪,目标追踪模型,内容如对您有帮助,希望把文章链接给更多的朋友!

匹配算法:

SORT算法: Kalman滤波, 匈牙利算法(匹配算法), 马氏距离(损失指标);

Kalman滤波是通过对上一帧每个检测对象进行预测,得到一个BBox_predicted,然后再将predicted与当前帧的检测对象BBox_measure进行匹配,这样的话就能固定ID了; 如果不用Kalman滤波,将当前帧的BBox_measure与上一帧的BBox_measure’进行匹配?

追踪为什么需要卡尔曼滤波?

通常要对一些事物的状态去做估计,为什么要做估计呢?因为我们通常无法精确的知道物体当前的状态。为了估计一个事物的状态,我们往往会去测量它,但是我们不能完全相信我们的测量,因为我们的测量是不精准的,它往往会存在一定的噪声,这个时候我们就要去估计我们的状态。卡尔曼滤波就是一种结合预测(先验分布)和测量更新(似然)的状态估计算法;其二,若出现视频中目标运动过快,前后两帧中同一个目标运动距离很远,那么这种直接匹配的方式就会失效。因此,可以通过现预测目标下一帧出现的位置,然后与检测的位置进行匹配关联,这样就不会由于速度太快而产生误差。 参考1

匈牙利算法

匈牙利算法只是尽可能地多匹配,而对于准确度没有很好的约束;

马氏距离

欧式距离是度量两点间的距离方法,而马氏距离针对的是多变量情况下的协方差距离。

即当量纲不同,考虑各种特性之间的联系下的一种距离尺度。由公式可知,欧式距离除以了一个协方差距离。

方差:方差是标准差的平方,而标准差的意义是数据集中各个点到均值点距离的平均值。反应的是数据的离散程度。协方差: 标准差与方差是描述一维数据的,当存在多维数据时,我们通常需要知道每个维数的变量中间是否存在关联。协方差就是衡量多维数据集中,变量之间相关性的统计量。比如说,一个人的身高与他的体重的关系,这就需要用协方差来衡量。如果两个变量之间的协方差为正值,则这两个变量之间存在正相关,若为负值,则为负相关。协方差矩阵: 当变量多了,超过两个变量了。那么,就用协方差矩阵来衡量这么多变量之间的相关性。余弦距离

余弦相似度的取值范围是[-1,1],相同两个向量的之间的相似度为1。

余弦相似度定义公式: cos(A,B)=A⋅B∥A∥2∥B∥2cos(A,B) = \frac{A\cdot{B}}{\lVert{A}\rVert_2\lVert{B}\rVert}_2cos(A,B)=∥A∥2​∥B∥A⋅B​2​ 余弦距离定义: dist(A,B)=1−cos(A,B)=∥A∥2∥B∥2−A⋅B∥A∥2∥B∥2dist(A,B) = 1 - cos(A,B) = \frac{{\lVert{A}\rVert_2\lVert{B}\rVert_2}-A\cdot{B}}{\lVert{A}\rVert_2\lVert{B}\rVert_2}dist(A,B)=1−cos(A,B)=∥A∥2​∥B∥2​∥A∥2​∥B∥2​−A⋅B​

DeepSORTSORT

SORT算法是通过检测的测量值和卡尔曼滤波得到的预测值进行IOU匹配。

对于没有匹配到的detections,创建新的trackers;

【MOT】目标追踪DeepSORT与ByteTrack(目标追踪模型)

对于成功匹配的detections,对kalman的trackers进行更新;

对于未成功匹配的trackers,则进行剔除。

DeepSORTalgorithm base对于每个tacker,有三种状态,分别是tentative,confirmed, unconfirmed;其中,第一种状态为每个tacker的初始化状态;tentative转换为confirmed状态,需要连续匹配上n_init次;对于每一个tracker,有time_since_update参数,每次与detection关联更新后重置为0;级联匹配根据time_since_update来作为优先级,先匹配那些一直得到更新的tracker,对于状态为confirmed,但没有得到更新的tracker(tracker每predict一次,time_since_update增加一次),也能使之得到更新,只是优先级靠后;即根据time_since_update参数来控制更新的顺序。由小到达对消失时间相同的轨迹进行匹配。当time_since_update>max_age(70)时,则将confirmed状态改变为deleted状态;unconfirmed trackers和 unmatched trackers 一起组成iou candicates,与unmatched detections进行IOU匹配;

cost matrix使用平方马氏距离来度量tracker和detection之间的距离;实际代码中没有用到运动信息(保留)使用cosine距离来度量表观特征之间的距离;综合匹配度通过运动模型和外观模型加权得到。

其中λ\lambdaλ是一个超参数,在代码中默认为0。作者认为在摄像头有实质性移动的时候这样设置比较合适,也就是在关联矩阵中只使用外观模型进行计算。但并不是说马氏距离在Deep SORT中毫无用处,马氏距离会对外观模型得到的距离矩阵进行限制,忽视掉明显不可行的分配。

Mahalanobis Distance/Cosine Distance

两者分别针对运动信息和外观信息的计算。马氏距离就是加强版的欧式距离。它实际上是规避了欧氏距离中对于数据特征方差不同的风险,在计算中添加了协方差矩阵,其目的就是进行方差归一化,从而使所谓的“距离”更加符合数据特征以及实际意义。马氏距离是对于差异度的衡量中,的一种距离度量方式,而不同于马氏距离,余弦距离则是一种相似度度量方式。前者是针对于位置进行区分,而后者则是针对于方向。换句话说,我们使用余弦距离的时候,可以用来衡量不同个体在维度之间的差异,而一个个体中,维度与维度的差异我们却不好判断,此时我们可以使用马氏距离进行弥补,从而在整体上可以达到一个相对于全面的差异性衡量。而我们之所以要进行差异性衡量,根本目的也是想比较检测器与跟踪器的相似程度,优化度量方式,也可以更好地完成匹配。

代码在linear_assaignment._match.gated_metric下,将外观余弦距离和马氏距离进行了封装。(保留意见)。

Cascaded match

级联匹配是Deep SORT区别于SORT的一个核心算法,致力于解决目标被长时间遮挡的情况。为了让当前Detection匹配上当前时刻较近的Track,匹配的时候Detection优先匹配消失时间较短的Track。

当目标被长时间遮挡,之后卡尔曼滤波预测结果将增加非常大的不确定性(因为在被遮挡这段时间没有观测对象来调整,所以不确定性会增加), 状态空间内的可观察性就会大大降低。在两个Track竞争同一个Detection的时候,消失时间更长的Track往往匹配得到的马氏距离更小, 使得Detection更可能和遮挡时间较长的Track相关联,这种情况会破坏一个Track的持续性,这也就是SORT中ID Switch太高的原因之一。

使用级联匹配算法,是为每个追踪器设定一个time_since_update参数。如果跟踪器完成匹配并进行更新,那么参数会重置为0,否则就会+1。实际上,级联匹配换句话说就是不同优先级的匹配。在级联匹配中,会根据这个参数来对跟踪器分先后顺序,参数小的先来匹配,参数大的后匹配。也就是给上一帧最先匹配的跟踪器高的优先权,给好几帧都没匹配上的跟踪器降低优先权(慢慢放弃)。

在级联匹配中,通过根据每个tracker的time_since_update是否等于max_age level来控制track更新的顺序;即有限匹配距上次出现间隔短的目标;

IOU match

在级联匹配后的IOU匹配中,更新对象是unmatch_trackers和unconfirmed trakcers,且since_time_update=1,即仅仅对上一帧的tracker进行iou匹配;

现在处理上面未参与外观匹配的新的轨迹,即uncofirmed tracks,同时把那些虽然是confirmed track,但外观匹配仅在上一帧没有成功的track放进来;那些长时间没有被匹配成功的track不用iou匹配,因为长时间没有匹配到,人早就走掉了,iou重合率也会非常低,iou比较高的也不太可能是同一个人.

Steps

说明:在deep sort代码中,tracker.py主要是匹配算法;track为每一个tracker的类属性

本文链接地址:https://www.jiuchutong.com/zhishi/298342.html 转载请保留说明!

上一篇:vue 3 项目实战一(绘制登录界面)(vue3.0项目实战视频)

下一篇:基于C#开发 B/S架构的实验室管理系统 云LIS系统(MVC + SQLserver + Redis)(c#开发入门及项目实战)

  • 美版苹果能用电信卡吗(美版苹果用电信卡没有信号)

    美版苹果能用电信卡吗(美版苹果用电信卡没有信号)

  • 小米cc9要不要升级miui11

    小米cc9要不要升级miui11

  • 为什么qq评论会自动消失(为什么QQ评论会被折叠)

    为什么qq评论会自动消失(为什么QQ评论会被折叠)

  • 华为荣耀v20支持无线充吗(华为荣耀v20支持手机u盘吗)

    华为荣耀v20支持无线充吗(华为荣耀v20支持手机u盘吗)

  • 小米手机图片删除了怎么恢复正常(小米手机图片删了怎么恢复回来)

    小米手机图片删除了怎么恢复正常(小米手机图片删了怎么恢复回来)

  • 转转聊天记录删除不了(转转聊天记录删了怎么找)

    转转聊天记录删除不了(转转聊天记录删了怎么找)

  • 手机欠费停机充值后多久可以用(手机欠费停机充不进去话费)

    手机欠费停机充值后多久可以用(手机欠费停机充不进去话费)

  • 快手的视频怎么下载到手机(快手的视频怎么删除撤回)

    快手的视频怎么下载到手机(快手的视频怎么删除撤回)

  • 相机cmos是什么意思啊(相机cmos是什么进灰)

    相机cmos是什么意思啊(相机cmos是什么进灰)

  • 苹果6shome键失灵怎么办(苹果6shome键失灵怎么截屏)

    苹果6shome键失灵怎么办(苹果6shome键失灵怎么截屏)

  • 如何制作考勤表格(如何制作考勤表视频)

    如何制作考勤表格(如何制作考勤表视频)

  • 淘宝人生装扮怎样去掉帽子(淘宝人生装扮怎么买)

    淘宝人生装扮怎样去掉帽子(淘宝人生装扮怎么买)

  • 华为mate20x5g怎么截屏

    华为mate20x5g怎么截屏

  • 运算器主要由什么组成(运算器主要由什么运算单元)

    运算器主要由什么组成(运算器主要由什么运算单元)

  • 为什么苹果发短信特效对方看不到(为什么苹果发短信发不出去)

    为什么苹果发短信特效对方看不到(为什么苹果发短信发不出去)

  • ipad插sim卡怎么收短信(ipad插sim卡怎么办)

    ipad插sim卡怎么收短信(ipad插sim卡怎么办)

  • 笔记本屏幕坏了怎么外接显示器(笔记本屏幕坏了怎么把资料导出来)

    笔记本屏幕坏了怎么外接显示器(笔记本屏幕坏了怎么把资料导出来)

  • 红米note8有红外线吗(红米NOTE8有红外功能吗)

    红米note8有红外线吗(红米NOTE8有红外功能吗)

  • 抖音号怎么知道手机号(抖音号怎么知道别人也登录)

    抖音号怎么知道手机号(抖音号怎么知道别人也登录)

  • 快手口令红包在哪输入(快手口令红包在哪里打开)

    快手口令红包在哪输入(快手口令红包在哪里打开)

  • 快手发现怎么换类型(快手发现怎么换成精选)

    快手发现怎么换类型(快手发现怎么换成精选)

  • 怎么购买哈啰单车月卡(哈啰出行怎么买电动车)

    怎么购买哈啰单车月卡(哈啰出行怎么买电动车)

  • 音箱没有声音如何排除故障(音箱没有声音如何修复)

    音箱没有声音如何排除故障(音箱没有声音如何修复)

  • 菜鸟驿站如何拒签(菜鸟驿站如何拒收快递)

    菜鸟驿站如何拒签(菜鸟驿站如何拒收快递)

  • 蓝牙耳机声音小怎么办(蓝牙耳机声音小音量已经是最大了)

    蓝牙耳机声音小怎么办(蓝牙耳机声音小音量已经是最大了)

  • gbtray.exe是什么进程 有什么作用 gbtray进程查询(gba是什么文件)

    gbtray.exe是什么进程 有什么作用 gbtray进程查询(gba是什么文件)

  • 企业的进项税额怎么算
  • 原始凭证填写过程
  • 先开票后跨月预缴税款可以吗
  • 已经开了发票需要退款怎么处理
  • 小规模纳税人需要做进项税吗
  • 企业递延所得税费用的计算公式
  • 建筑企业增值税怎么算
  • 户口与工作地不一致,社保
  • 企业所得税查增值税吗
  • 会员卡 退
  • 专利权转让的净收益计入
  • 确认应收账款不确认收入
  • 展会门票费计入什么科目
  • 6%的增值税专用发票怎么开
  • 企业所得税工资薪金和个税申报里一致么
  • 给政府开发票如何处理?
  • 车辆保险费的车船税计入什么会计科目
  • 交强险和车船税必须一起交吗
  • 工程款发票遗失怎么处理
  • 机动车发票认证了的发票怎么红冲
  • 跨年度错账更正方法
  • 分期付款的车怎么做分录
  • 公司租赁房屋的物业费怎么入账
  • 逾期往来账款怎么处理?
  • 企业投资股票取什么名字
  • 不确定金额的应收账款
  • ppt文件打不开了怎么办
  • 公司筹建期间发生的业务招待费,如何税前扣除
  • “linux系统”
  • 苹果电脑怎么打顿号
  • 收藏的php常用函数是什么
  • 购入固定资产后发生的员工培训费应计入固定资产的成本
  • 怎么登记总分类账簿
  • 债务担保可以税前抵扣吗
  • 怎么租一个月
  • Dardanup郡的小矮人村,澳大利亚 (© Amanda Hughes/Alamy)
  • 固定资产改造后如何计提折旧
  • 代开专用发票的流程资料要求
  • wordpress恢复主题默认设置
  • php获取路径和目录的方法
  • composer环境变量
  • php封装api
  • egi脑电数据处理
  • word2vec使用方法
  • 金融企业会计科目有哪些
  • 公司转让注册海外公司
  • mongodb4.4.2安装教程
  • 车补贴是要缴纳增值税吗
  • 为什么出台农产品质量安全法
  • 固定资产货币化,货币资产保险化,保险资产信托化
  • 存货计提减值准备对所得税的影响
  • 房产公司结转成本的会计分录
  • 营改增租金收入税率
  • 实收资本为0可以运作吗?
  • 合同法有什么规定
  • 投资性房地产用三栏式吗
  • 给业务员的佣金怎么做账
  • 怎么查对方是一般还是小规模
  • 核定征收也需要报税务报表吗?
  • 房租可以提前开票吗
  • 什么企业可以开培训费发票
  • 原股东将全部股权转让
  • mysql怎么修改数据表
  • 微软windows8.1
  • windows常用功能
  • 超级本可以玩游戏吗
  • windows10玩lol有延迟怎么办
  • centos的命令
  • win8怎么设置
  • unet遥感图像分割
  • shell脚本实现文件重命名
  • javascript主要学什么
  • javascript概述
  • python函数判断质数
  • 税务 违法税收
  • 广东省地方税务局班子成员
  • 江西省电子信息职业学院
  • 房租收入影响个人所得税汇算
  • 出口退税的管理办法
  • 银行手续费所得税是否可以税前扣除
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设