4、自然语言生成文本的沟通效果研究

自然语言生成文本的沟通效果研究

1. 实验背景与目的

本次实验旨在从用户角度评估Nomao的自然语言生成（NLG）系统的性能。通过对比机器生成文本和人类撰写文本，测试特定假设，以深入了解文本对读者的影响。

2. 实验设计

2.1 样本群体

实验选取了28名来自蒙特利尔大学的学生，其中男性7人（占比60.7%），女性11人（占比39.3%），平均年龄24岁，标准差为5.8，中位数年龄为23岁。这些学生参与实验未获得报酬。

2.2 设备与数据处理软件

• 眼动记录 ：使用Tobii TX 300屏幕，采样率设置为60 Hz（即每17毫秒释放一个样本），两次注视之间的最大角度设置为0.5度。
• 数据记录 ：使用Tobii 3.2软件。
• 数据处理 ：使用Excel和SPSS软件。

为避免被试内实验中任务执行顺序带来的污染效应，将学生分为两组（G1和G2），每组14人，两组执行实验的顺序不同。同时，对于所有可用的顺序数据，使用Friedman检验。

2.3 实验流程

每个参与者依次阅读两篇文本（文本1 “Angelina”和文本2 “Chez Janou”），每篇文本展示90秒。每次文本展示后，参与者需回答关于该文本关键信息单元的8个封闭式问题。完成回忆任务后，参与者要填写情感负荷评估问卷（包括兴趣和信心水平，采用1 - 9的李克特量表）和认知负荷评估调查（包括内在、必要、外