视频搜索系统:从Sloth Search到ITEC CoViSS的升级之路
1 Sloth Search System介绍
1.1 用户交互设计
Sloth Search System(SSS)旨在为用户提供便捷的视频搜索和浏览体验。其用户界面支持用户通过特定场景类型或类别进行查询。具体查询流程如下:
1. 用户使用场景类型或类别定义查询,系统会返回与查询相关的候选视频。
2. 从这些候选视频中,用户可以重复进行关键词查询,以浏览更具体的候选镜头。
3. 当找到相关镜头时,用户选择该镜头作为检索结果提交。
4. 如果没有相关镜头,用户可以应用草图搜索或边界框搜索。
5. 如果仍然没有找到相关镜头,用户需要重复步骤1或4来更改查询。
1.2 系统概述
SSS是为视频浏览器展示会设计的视频浏览工具,可作为已知项目搜索(KIS)或临时视频搜索(AVS)任务的辅助视频搜索工具。该系统利用高级语义特征、对象空间信息和颜色特征签名生成紧凑特征进行索引。通过用户界面,主要有两种查询类型:文本查询和草图查询。搜索系统能够查找带有关键词标签、独特颜色或对象空间信息的视频帧,搜索结果以候选列表的形式展示,用户可以从中浏览特定项目。
graph LR
A[用户定义查询] --> B[系统返回候选视频]
B --> C[重复关键词查询]
C --> D{找到相关镜头?}
D -- 是 --> E[提交检索结果]
D -- 否 --> F{应用草图或边界框搜索?}
F