Tracking 入门随笔-随时更新

Beyond Local Search: Tracking Objects Everywhere with Instance-Specific Proposals

会议:CVPR 2016
实验室:Australian National University, Hongdong Li
目标:以前的方法只能在小范围内查找,本文的方法提供甚至在整张图上的查找的能力,实现跟踪。
特色:应用edge-based features,来自Piotr Doll´ar的一系列工作


A Super-Fast Online Face Tracking System for Video Surveillance

实验室:自动化所
目标:快速检测监控下的多个人脸,对暂时出画面的物体鲁邦。
方法:KLT + 直方图验证(保证不是背景)+ 记忆跟踪

  • 直方图是做在整张脸上的。
  • 开辟一个buffer用来存储跟踪消失的人脸的模型。

A Contour-Based Moving Object Detection and Tracking

2005
目标:鲁棒、快速、非刚体物体检测和跟踪
方法:edge-based features(对光照不敏感) + 梯度光流法(gradient-based optical flow technique)


Face Tracking: An implementation of the Kanade-Lucas-Tomasi Tracking algorithm

KLT在人脸跟踪上的实践

KCF [1]

  • High-Speed Tracking with Kernelized Correlation Filters
  • 采用判别式的tracking,需要区分目标和surrounding 环境,需要大量的训练样本,这些样本之间存在着大量的冗余,于是作者采用创新的circulant matrix来生成训练样本,这样的好处就是得到的数据矩阵是circulant,于是可以利用DFT(离散傅里叶变化)对角化,从而减少计算量
  • 傅里叶变换可以把循环矩阵对角化
  • 循环矩阵是一种特殊形式的 Toeplitz矩阵,它的行向量的每个元素都是前一个行向量各元素依次右移一个位置得到的结果。由于可以用离散傅立叶变换快速解循环矩阵,所以在数值分析中有重要的应用。

MOSSE[2]

  • Matlab上,对640*480的图片不能实时
  • 但是文章称在Python using the PyVision library,OpenCV, and SciPy上可以达到669的帧率
  • 通过仿射变换得到一系列的训练数据f和g,计算所需要的模板h。在下一帧,同一个框内,计算得到最高的响应位置就是新的框中心。

“Learning to Track at 100 FPS with Deep Regression Networks”


MDnet[3],


DSST[4],

  • Danelljan等人对基于CF的方法作了改进,增加了对缩放的估计。
  • 声称快速并且高效
  • 缩放方法用在MOSSE跟踪方法上,但是该缩放方法可以普遍用于其他跟踪方法
  • 其fast scale search速度为:24 fps
  • 提出的Exhaustive Scale Space Tracking就是将原来二维图像的通过金字塔弄成三维的,h和g也相应变成三维的。响应最大的那个层就是scale的最佳值,0.96FPS

LCT[5]


Visual Tracking: An Experimental Survey [6]

  • 主要贡献:systematic analysis and the experimental evaluation of online trackers
  • 在130段视频上进行评测
  • 不评价off-line的算法
  • 不评价contour-based算法,因为初始化比较困难
  • 表1,总结了各种评价标准
  • F score:

一些数据库

  1. OTB50 http://cvlab.hanyang.ac.kr/tracker_benchmark/datasets.html
  2. OTB100
  3. VOT2014[7] http://www.votchallenge.net/
  4. VOT2015
  5. BoBoT dataset:“D. A. Klein, D. Schulz, S. Frintrop, and A. B. Cremers, “Adaptive
  6. real-time video-tracking for arbitrary objects,” in Proc. IEEE IROS, Taipei, Taiwan, 2010, pp. 772–777.”
  7. CAVIAR dataset:few but long and difficult videos
  8. i-LIDS Multiple-Camera Tracking Scenario
  9. 3DPeS dataset:contains videos with more than 200 people walking as recorded from eight different cameras in very long video sequences
  10. PETS-series:
  11. TRECVid video dataset:large video benchmark
  12. ALOV++ dataset:proposed by [6]; more than 300 video sequences; http://crcv.ucf.edu/data/ALOV++/

评价标准

  1. PETS:Performance Evaluation of Tracking and Surveillance
  2. PETS and VACE,CLEAR:for evaluating the performance of multiple target detection and tracking

参考文献

[1] J. F. Henriques, R. Caseiro, P. Martins, and J. Batista, "High-Speed Tracking with Kernelized Correlation Filters," IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 37, pp. 583-596, 2015.
[2] D. S. Bolme, J. R. Beveridge, B. A. Draper, and Y. M. Lui, "Visual object tracking using adaptive correlation filters," in 2010 IEEE Computer Society Conference on Computer Vision and Pattern Recognition, 2010, pp. 2544-2550.
[3] H. Nam and B. Han. (2015, October 1, 2015). Learning Multi-Domain Convolutional Neural Networks for Visual Tracking. ArXiv e-prints 1510. Available: http://adsabs.harvard.edu/abs/2015arXiv151007945N
[4] M. Danelljan, G. Häger, F. Khan, and M. Felsberg, "Accurate scale estimation for robust visual tracking," in British Machine Vision Conference, Nottingham, September 1-5, 2014, 2014.
[5] C. Ma, X. Yang, Z. Chongyang, and M. H. Yang, "Long-term correlation tracking," in 2015 IEEE Conference on Computer Vision and Pattern Recognition (CVPR), 2015, pp. 5388-5396.
[6] A. W. M. Smeulders, D. M. Chu, R. Cucchiara, S. Calderara, A. Dehghan, and M. Shah, "Visual Tracking: An Experimental Survey," IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 36, pp. 1442-1468, 2014.
[7] M. Kristan, J. Matas, A. Leonardis, T. Vojíř, R. Pflugfelder, G. Fernández, G. Nebehay, F. Porikli, and L. Čehovin, "A Novel Performance Evaluation Methodology for Single-Target Trackers," IEEE Transactions on Pattern Analysis and Machine Intelligence, vol. 38, pp. 2137-2155, 2016.

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,036评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,046评论 3 395
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,411评论 0 354
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,622评论 1 293
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,661评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,521评论 1 304
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,288评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,200评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,644评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,837评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,953评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,673评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,281评论 3 329
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,889评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,011评论 1 269
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,119评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,901评论 2 355

推荐阅读更多精彩内容