22、本体对齐评估倡议：经验总结与未来展望

本体对齐评估倡议：经验总结与未来展望

1. 运行时间分析

在实际应用中，除了生成对齐的质量，系统的运行时间也至关重要。随着现有本体数量和规模的增加，运行时间的重要性愈发凸显。2007 年，在解剖学赛道的评估中首次系统地对匹配系统的运行时间进行了测量。由于之前 OAEI 活动的设置，系统开发者在本地测试集上运行匹配器并提交结果，难以在公平的基础上测量可比的运行时间。因此，我们收集了参与者自行测量的运行时间声明，同时还需提供匹配过程执行计算机的 CPU 和内存能力描述。

从 2007 - 2009 年的运行时间数据（如下表所示）可以看出，社区在运行时间问题上有了明显的改进。2007 年，有一个系统匹配本体需要四天时间，而 2009 年最慢的系统在不到两小时内就完成了匹配过程。平均和中位数也从 2007 年到 2009 年显著下降，且 2009 年中位数和平均值似乎趋于一致，因为不再有需要大量时间的负面异常值。同时，大多数情况下运行时间的减少与生成对齐质量的降低无关。

系统/年份	2007	2008	2009
Anchorflood	-	1	0.25
AgreementMaker	30	-	23