20、本体对齐评估倡议：六年经验总结

本体对齐评估倡议：六年经验总结

1. 评估设计概述

评估设计是评估活动的核心，设计一个好的评估并非易事。它需要平衡多个部分冲突的需求：
- D1 ：评估标准和测试应涵盖问题的所有相关方面，评估结果应能很好地估计被测系统在实际应用中的预期性能。
- D2 ：评估必须公平，不偏袒某种特定方法或对数据性质或结果有特定假设的系统。
- D3 ：评估结果应具有信息性，使被测系统的开发者和潜在用户能够了解工具的优缺点，并决定哪种工具性能更好。
- D4 ：评估应允许快速反馈循环，以促进技术的进步。这要求活动的开展对参与者和组织者来说都不应过于费力。

基本的本体匹配工具评估过程如下：

graph LR
    classDef process fill:#E5F6FF,stroke:#73A6FF,stroke-width:2px;
    o(本体 o):::process --> m(匹配组件):::process
    o'(本体 o'):::process --> m
    m --> A(生成对齐 A):::process
    A --> e(评估脚本):::process
    R(参考对齐 R):::process --> e
    e --> m(质量度量 m):::process

匹配组件接收两个本体作为输入并生成对齐，评估脚本将生成的对齐