18、群件评估的计算机支持协作工作实验室

群件评估的计算机支持协作工作实验室

1 群件评估的现状与挑战

群件评估已经成为一个备受关注的研究问题。随着群件应用的普及，评估这些工具在实际应用中的有效性和适用性变得尤为重要。然而，群件评估面临着诸多挑战，包括如何识别和控制影响群件使用的各种变量，以及如何确保评估结果的通用性和可靠性。这些问题使得群件评估成为一项复杂且昂贵的任务。

1.1 评估的必要性

没有适当的评估机制，开发者难以积累足够的经验来构建更好的系统。群件评估的四个核心问题包括：评估什么？采用何种方法论？使用什么标准？以及需要哪些工具？

2 群件评估的方法论

尽管群件评估方法众多，但尚未达成共识。Pinelle和Gutwin基于CSCW领域的主要会议，提出了一个关于常用评估方法的调查报告。他们根据评估环境（自然发生或现象模拟）和变量操纵的程度（严谨或最小控制变量）对评估进行了分类（见表1）。每项工作都采用了不同的方法、方法论或技术来进行评估。

操纵程度	自然主义的	设置受控的
严谨的		实验室实验
最小/无	实地实验	探索性的

表1. 评估分类

3 群件评估的维度