
什么是AI幻觉
AI幻觉,简单的说就是AI工具在生产答案时,为了追求输出的 流畅、”合理“ ,并未按照事实或者真实世界的基本常识来进行回答。
我们可以理解AI其实是一个知识量储备极其庞大、头脑又非常聪明的”人“,但它长期与世隔绝的生活,导致它非常缺乏在真实世界生活的经验。虽然它的知识量储备非常大,但是所有的知识都是东拼西凑混合训练而来。
在回答问题时,为了实现逻辑上的自洽,部分细节无法得到有效验证时,就会出现”胡编乱造“,即AI幻觉。
AI为什么会产生幻觉
通过学习海量数据中的统计规律来回答被提的问题。AI模型不具备对世界的真正理解,也没有我们人类所拥有的常识。它不是从一个确定性的答案里来获取,所以幻觉其实是无法避免的。
而且AI模型的首要目标是让生成的内容读起来通顺、合理。为了追求这一目标,模型会“下意识地”填补那些它不确定的信息。
同时,数据训练也有时间限制,对于时间截止之后发生的世界,它是完全不知的,在事实发生变化后仍然基于过去信息生产的答案很有可能是错误的。
会产生幻觉还有一个重要的因素就是在与人类交互时,给它的提示是否清晰、完整和有效,如果问题本身就很模糊、存在歧义,或者包含了错误的前提,AI模型很可能会沿着这个错误的方向“编”下去。
怎么缓解幻觉的产生
这是一个目前比较重要的研究方向,就是如何让AI回答的更准确。当前除了不断改进模型算法和提高训练方法外,最主流的做法就是使用RAG。
RAG是目前最有效和应用最广的方法之一。它在模型回答问题前,先从外部的、可信的知识库(例如百科、确定性文档)中检索相关信息,然后让模型基于这些确定的信息来生成答案,大大提高了准确性和可追溯性。
239

被折叠的 条评论
为什么被折叠?



