—— 开放的知识共享平台

AI为什么会一本正经地“胡说八道”?原因其实很简单

首页 > 头条采集 > AI为什么会一本正经地“胡说八道”?原因其实很简单

最近一段时间,全球范围内因为AI胡编乱造引发的行业翻车事故接连不断。

很多原本深信AI全知全能的普通用户,直到被假数据、假论文、假法规坑了之后才猛然惊醒。明明看似逻辑清晰、语言流畅。

甚至连数据出处都标注得有鼻子有眼的专业解答,一查源头居然全是凭空捏造,这不是个别软件的偶发问题,而是当前所有生成式模型共同存在的致命短板。

今天我们必须把这套把戏的底层逻辑彻底说明白。

概率接龙的死穴

很多人至今依然认为,向AI提问就等于在查阅一个巨型的权威数据库,以为系统会像图书馆管理员一样,按照关键词从书架上精准取出客观事实。这种认知完全脱离了实际。

目前主流的大语言模型,其底层运作的核心机制叫做“基于上下文的词元序列概率预测”。

简单来说,模型处理任务时,唯一做的工作就是计算下一个词出现的数学几率。

2023年3月14日,美国OpenAI公司正式发布GPT-4技术报告,在这份长达98页的官方技术文档中,研发团队白纸黑字地明确承认,该模型在处理涉及事实核查的专业测试时。

内部事实性错误的发生率依然维持在较高区间,即使经过多轮人类反馈强化学习,也无法彻底根除凭空生成虚假内容的固有缺陷。

这就直接决定了大模型在运行过程中根本没有“客观真实”这个物理概念。

大模型本质上是一个极度擅长文字接龙的概率匹配机器。

在它所包含的数千亿乃至上万亿参数的复杂网络里,算法每吐出一个字符,依据的仅仅是这个字符与前文拼接在一起时,在统计学层面上是否足够顺畅。

当用户输入一个问题时,模型优先执行的指令是维持语法的完整、语义的连贯和行文的专业度。

只要组合出来的段落读起来通顺、看起来像那么回事,算法就会毫不犹豫地将字符排列出来,至于内容是否符合客观规律,算法自身完全没有甄别机制。

这种机制带来的直接后果,就是一旦面对冷门知识、细分专业领域,或者其语料库未曾覆盖的信息盲区时,AI绝对不会主动承认停摆。

相反,它会立刻调动已有的句式模版,按照最符合人类学术写作或公文规范的语言习惯强行补全。

当你要求它列举某领域的权威学术专著时,如果数据库里缺乏精确记录,算法就会抓取常见的学者姓氏、高频的期刊词根,以及符合学术规范的卷期格式,瞬间组合出一篇看似严丝合缝、实则根本不存在的虚构文献。

在算法的运算规则里,这些编造出来的人名、期刊号和出版年份,与真实的物理世界毫无关联,它们仅仅是满足概率最大化的数字标记。

很多普通用户之所以屡屡受骗,就是因为人类天然习惯将“流畅的表达”与“严谨的事实”直接挂钩。

在传统的人际交流中,一个人如果能使用高度结构化的语言、报出精确到个位数的统计指标、列出完整的因果链条,通常意味着此人具备深厚的专业储备。

但大模型彻底打破了这种经验法则,它不需要理解任何专业逻辑,就能依靠海量运算生成毫无瑕疵的专业语气。

这种用确定性极强的口吻输出完全错误事实的现象,在计算机技术领域被统称为“机器幻觉”。

只要生成式预训练的底层技术架构不发生颠覆性改变,这种概率层面的先天缺陷就永远无法彻底消除。

源头污染的代价

AI究竟能输出什么水准的内容,完全取决于它的训练数据集是由什么构成的,以及它在联网状态下抓取了哪些信息来源。数据源头一旦存在偏差和污染,算法最终吐出的结论必然彻底走形。

2024年5月14日,谷歌公司在其年度开发者大会上正式宣布,全面向全球数亿用户上线名为“AI Overview”的智能搜索整合功能。

然而这项耗资数十亿美元打造的核心产品上线还不到两周,便在公开测试中遭遇了灾难性的舆论翻车。

大量真实用户在社交平台上公开了系统的荒诞回复:当用户询问如何防止披萨上的芝士脱落时,该系统给出的官方指导方案竟然是“在番茄酱中加入八分之一杯无毒胶水以增加黏附力”。

而当有用户搜索肾结石排石技巧时,系统甚至公然建议用户“每天至少吞食一块小石头以补充地质矿物质”,事后科技媒体深入排查数据来源时发现,该系统之所以给出如此荒腔走板的答案。

是因为其背后的抓取爬虫在未经严格过滤的情况下,直接调取了美国网络论坛上多年前的讽刺搞笑贴文,并将这些完全由网民恶搞撰写的荒谬言论,直接赋予了高权重的事实属性。

盲目信任的深坑

国内同样有一部分人,言必称某某模型的答案比人工更加客观公正,甚至拿AI自动拼凑出的碎片化虚假信息,来反向质疑国家相关部委发布的权威统计公报。

这种本末倒置的认知极其危险。

无论算法模型在商业包装下被吹嘘得多么神乎其神,它归根结底只是一段运行在服务器阵列上的计算代码。

它没有社会实体属性,不会对其给出的虚假建议承担任何刑事或民事责任,更不可能站在维护人民利益的立场上考虑问题。

在复杂信息与核心决策面前,独立审视与源头交叉验证的权利永远不能拱手让给任何数字代码。

随着算法对人类认知介入的程度越来越深,等待全人类的,究竟是一个彻底透明的信息世界,还是一场被高级算法伪装得更隐秘、更难辨识的新型认知陷阱?