16、交互式联合专利搜索系统的评估

交互式联合专利搜索系统的评估

实验背景与方法

本次实验的参与者是34至54岁的专利审查员，他们都有丰富的专利审查经验，并且具备良好的信息技术使用能力和英语理解能力。

在实验的第一天，为参与者进行了45分钟的介绍性演示，目的是让他们对PerFedPat系统及其集成的搜索工具建立基本的了解。

用户研究分为三个不同的阶段，每个阶段之间有短暂的休息。具体流程如下：
1. 第一阶段 ：主要考察专利搜索界面的可用性，特别是PerFedPat系统的两个主要功能：联合专利搜索系统，以及使用多个搜索工具和用户界面进行结果探索。参与者被要求使用PerFedPat完成一些常见任务，例如给定一个专利，让他们在搜索相关专利时执行特定任务，以此评估界面的可用性。
2. 第二阶段 ：为用户提供一个去除了国际专利分类（IPC）代码的现有专利，要求他们使用分类搜索系统检索该文档应归属的IPC代码。此阶段的结果已有相关文献报道，本文不再讨论。
3. 第三阶段 ：每个参与者从现有专利池中随机选择一个专利，使用PerFedPat搜索该专利的现有技术。每个参与者需要使用两种不同的系统设置各进行一次搜索任务：
- “核心”PerFedPat ：仅使用核心工具。
- PerFedPat加集成搜索工具 ：使用核心工具和额外的集成搜索工具。

此阶段的设计是将“核心”PerFedPat作为基线，然后比较“PerFedPat加集成搜索工具”在召回率、搜索效率（如查找现有技术的时