6、信息检索、数字图书馆与MTCC测试方法解析

信息检索、数字图书馆与MTCC测试方法解析

1. 信息检索的局限性与评估

信息检索的目标是在文档集合中找出与用户信息需求相关的文档。然而，当前信息检索的评估过程存在一些局限性：
- 二元相关性评估 ：采用二元相关性评估文档，这是对现实的简化，但不影响该评估方法的有效性。
- 相关性概念的静态假设 ：假定相关性概念对每个用户在每个时刻都是静态的，忽略了用户对文档了解后相关性会发生变化的事实。
- 信息需求的单一查询假设 ：假设用户的信息需求是完全形成的，且可以用单个查询表达，忽略了信息检索是一个动态的交互过程，用户的信息需求是不断演变的。

由于上述系统中心的评估方法无法将信息检索作为对话进行评估，因此需要以用户为中心的方法，考虑系统的可用性等方面。但MTCC方法由于抽象了用户与被测系统交互的界面，不适合用于以用户为中心的评估。

2. 数字图书馆的特点与挑战

数字图书馆是专门的信息检索系统，通常是特定主题的门户，为特定科学领域提供科学信息。这里讨论的数字图书馆主要是基于元数据驱动的，适用于社会科学领域，其他数字图书馆如ACM或IEEE数字图书馆也可以用MTCC方法进行表示和测试。

数字图书馆集成多个数据库，这极大地增加了系统的复杂性，具体体现在以下方面：
|信息类型|描述|
| ---- | ---- |
|在线公共访问目录（OPAC）|包含图书馆中书籍、期刊和其他媒体的信息，记录通常包含书目数据和主题描述，但没有摘要。|
|电子全文|可能需要付费获取，也可能