Assessing Consciousness-Related Behaviors in Large Language Models Using the Maze Test

文章总结与翻译

一、文章主要内容

本文聚焦于利用“迷宫测试”(Maze Test)评估大型语言模型(LLMs)的类意识行为,核心内容围绕理论整合、实验设计、结果分析展开,具体如下:

  1. 理论基础:意识特征提炼
    通过系统梳理13种主流意识理论(如全局神经工作空间理论、整合信息理论等),提炼出13项意识核心特征,涵盖计算认知与信息动态、注意力、高阶思维、时间感知等维度,为LLMs的类意识行为评估提供结构化标准。
  2. 实验设计:迷宫测试构建
    设计“迷宫测试”,以鸟瞰视角的迷宫文本描述为输入,要求LLMs以第一人称生成逐步导航指令。测试同时考察空间感知、视角转换、目标导向行为和时间序列能力——这些均为意识相关的关键认知过程。实验设置零样本(zero-shot)、单样本(one-shot)、少样本(few-shot)三种学习场景,评估12个主流LLMs(含Google Gemini 2.0系列、Anthropic Claude 3系列、OpenAI o系列、DeepSeek系列)。
  3. 评估指标与结果
  • 完全路径准确率(Complete Path Accuracy):衡量模型生成从入口到出口完整正确路径的比例,Gemini 2.0 Pro表现最佳,少样本场景下达52.9%。
  • 部分路径准确率(Partial Path Accuracy):衡量模型首次出错前连续正确步骤的平均比例,D
上一篇: SDGO: Self-Discrimination-Guided Optimization for Consistent Safety in Large Language Models
下一篇: Error Reflection Prompting: Can Large Language Models Successfully Understand Errors?
UnknownBody
博客等级 码龄16年 5600粉丝 4729原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

UnknownBody

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值