65、SURVANT：基于创新语义的监控视频系统解析

SURVANT：基于创新语义的监控视频系统解析

1. 复杂查询制定器（CQF）

在调查工作中，尤其是调查的最初关键几个小时，为了加快调查速度，需要更复杂的搜索方式。复杂查询制定器（CQF）能够通过组合简单查询类型形成更复杂的查询，识别需要查询的必要服务，并对这些服务进行询问以检索相关信息。CQF 参与的主要调查序列如下：
- 图像搜索 ：用户可以通过搜索与调查相关的视频中的相似内容来获取调查结果。用户可以选择视频片段中的特定帧，搜索相似的人或物体；也可以上传从其他来源获得的图像，在视频库中搜索该物体。
- 句子搜索 ：调查人员可以利用系统的复杂查询制定器功能进行调查，并通过一系列高级事件结果来浏览视频片段。用户可以通过拖放机制创建一个类似句子的关系列表，该列表由物体、事件、地理和时间坐标组成。
- 地理分析 ：从前面提到的搜索类型开始，检测出物体、嫌疑人、受害者或其他感兴趣的人员。然后，调查人员可以请求标注人员的轨迹，并可以根据新的或细化的查询请求重复分析。

2. 索引器：视觉相似性与人脸重识别

当人工调查人员需要分析大量监控摄像头视频片段以识别嫌疑人的可能出现情况时，这在时间和人力资源方面都要求极高。基于与目标图像的相似性来定位嫌疑人的可能出现情况是系统要自动化实现的关键目标。

2.1 索引器工作原理

索引器模块获取对象检测器为每个视频帧报告的边界框和对象类型，并为边界框坐标内的帧区域构建特征向量。这个向量类似于指纹，相似的图像应该有相似的指纹。索引器将特征向量与元数据（如帧号、边界框、时