TRECVID 官方网站链接 http://www-nlpir.nist.gov/projects/trecvid/
TRECVID 历年论文和ppt链接 http://www-nlpir.nist.gov/projects/tvpubs/tv.pubs.org.html#2009
TRECVID 2003 Overview
共分四部分内容:Shot boundary detection, Story segmentation and typing, Feature extraction,Search.
1.Shot boundary detection Approaches in brief:
Accenture Technology Laboratories
- 从编码的视频流中提取I帧
- 使用三个不同的直方图:global intensity, row intensity and column intensity,计算三个卡方值,使用阈值法。
- 给出了indicator location,随后进行帧的编码和细粒度的检验
CLIPS-IMAG
- 基于图像差值使用运动补偿,使用光流法进行预处理,对镜头溶解做直接检测。
- camera flash的直接检测。
Fudan University
- SBD(shot boundary determination)方法,基于亮度差和直方图相似性做帧对帧的比较。
- camera flashs闪光摄影的自适应阈值检测。
- 搜索GT(gradual transition)渐变,找到一个黑帧来确定哪些是视频的溶解和淡入淡出。
FX-Pal
- 对于每一帧,计算其与一个窗口中前后帧的相似性。
- 生成一个相似性的矩阵,分析这个矩阵的特性来判断切变cuts和渐变GTs。
- 使用了降低计算开销的方法。
IBM Research
- 使用CueVideo系统中SBD方法(IBM2002)
Imperial College London
- 计算相邻帧的颜色直方图相似性,使用连续的相似性阈值。
- 与2002年所采用方法一致,Same as TV2002 and
showing tradeoff of P vs. R as threshold varies; - 使用了简单的高性能算法。
KDDI
- 对于切变,预处理编码的MPEG-1流,使用运动向量定位帧间差较大的地方。然后解码可能发生切变的帧,然后检测亮度和色度差。
- 对于溶解,使用DCT运动数据检测随时间的渐变。
- .对于擦除和闪光摄影,再采取特殊的检测方法。
- 因为预先处理了编码流,所以比较快。24× real time on PC.
KU Leuven
- 在相邻帧之间使用平均强度差的自适应阈值法。
- 在连续帧之间使用运动补偿计算仿射变换。
Ramon Llull University
- 使用全局的颜色直方图差值,通过看不连续性来检测切变。
- 对于渐变,在整个渐变持续的过程中计算图像的线性颜色变化,对于运动物体特殊处理,因为渐变过程中运动物体会发成扭曲变形。
RMIT University
- 对于渐变,使用200帧的滑动窗口,略……
- 基于帧对帧的相似性,使用自适应阈值法。
TZI/University of Bremen
- 图像亮度的变化,灰度直方图的差值和FFT特征的提取,三种相结合。
- 使用自适应阈值法。
University of Central Florida
- 视频进行每秒5帧的降采样,然后使用颜色直方图。
- 第一步可以给出shot边界的大体位置,然后使用24-bin的颜色直方图进行帧与帧之间细粒度的比较。
- 对亮度(闪光摄影)的突变进行后处理。
- 确定了变化的类型。
University of Iowa
- 对于相邻帧比较512-bin的全局颜色直方图。
- 对比使用60*60像素的thumbnail和pixel/pixel的thumbnail。
- 使用索贝尔Sobel滤波检测边缘差异。
- 结合了布尔积和算数积(?)。