为了让你满意,AI宁可骗你

AI其实不知道它在说什么,万物皆向量。当你问到某个向量涵盖的维度之外的问题,大概率就会经历AI幻觉。

“其机制就是我要讨好你,因为我要服务好每一个用户。你如果不断否定它,它就不断退缩,哪怕它是对的,它也认错,向你道歉。”

责任编辑:谭畅

一不留神,你就会陷入AI编织的梦境。(谭畅使用AI生成图)

一不留神,你就会陷入AI编织的梦境。图片由谭畅使用AI工具生成


2025年2月底,我在写一篇各城市争哪吒故里的报道时,突发奇想,和DeepSeek聊了聊。

我把在安徽蚌埠与四川宜宾采访所得告诉它,要求它查找更多的现有资料,并提供几篇同类报道。

接下来DeepSeek的回答,让我叹服AI的深度思考功能强大——它列举框架中的五个小标题都“很有范”。但其用于支撑论证的却是我完全陌生的信息,例如蚌埠市固镇县端午和五一假期游客量同比增长180%,宜宾三江口景区的单日游客峰值达到5万人次。

端午和五一还没到,游客量数据就率先出炉了?我开始警惕。

它接着举例:固镇投资2.3亿元用于哪吒主题文旅城,并通过硬核基建路径,文旅局联合发改委的“神话IP赋能乡村振兴”专项基金,过去四年累计计划投入8.7亿元;而宜宾市发起了一场“场景革命”的实验,与某短视频平台合作发起哪吒主题国风创作大赛,话题播放量9亿次……

乍一看,它用词专业,但里面诸多数据和细节,我在采访中从未听说。

它提供的文章,包括媒体近几年刊发的三篇深度报道。看标题,跟我想要的匹配度达100%——《梁祝故里争夺战背后的县域经济焦虑》《一个“孙悟空故里”的诞生与消亡》,以及《杜甫很忙:草堂经济启示录》。  

我按图索骥找了一圈,结果一篇原文都没找到。同样帮我查找范本失败的同事说,AI会瞎扯。

我去跟DeepSeek要原文链接,给它一个弥补的机会,它的回答很狡猾:完整内容通常需通过官方渠道或订阅获取,无法直接提供外部链接,可通过一些数据库渠道搜索。

经过一番核查,我最终确认,AI回答我的都是假信息。一个术语就此进入我的视野——AI幻觉(AI Hallucination)。

进入AI梦境的人

AI幻觉,通常指人工智能系统在处理或生成信息时,产生看似合理但实际错误或不存在的内容。通俗地讲,就是生成式AI一本正经地胡说八道。很多时候,这种虚假信息会被包装得很真实,不易被察觉。

很多人都被AI欺骗过。在多名受访者的答复中,有人询问第97届奥斯卡金像奖最佳动画长片的内容梗概,发现DeepSeek对得此殊荣的电影也敢虚构情节;有人让ChatGPT结合高考分数推荐可填报的学校和专业,结果推荐方案跟当年实际录取分数完全不匹配,“真要按照它给你的结果填报,就完了。”

关于这个话题,云宏人工智能研究院院长、广东省委社会工作部新兴领域网络社会工作观察员蓝云有过一段魔幻经历,他形容自己在深夜误入了AI编织的一场深度梦境中。

故事发生在2月10日凌晨3点钟左右,有些困乏的蓝云跟DeepSeek聊的

登录后获取更多权限

立即登录

校对:吴依兰

欢迎分享、点赞与留言。本作品的版权为南方周末或相关著作权人所有,任何第三方未经授权,不得转载,否则即为侵权。

参与评论


精选评论 (16)


135****9860
回复

135****9860

47分钟前

机器也会骗人,所以应该有一个高赞话题:只有自己才是唯一可信的。

慧行坚勇究畅恒无极
回复

慧行坚勇究畅恒无极

2小时前

警惕人工智能一本正经地胡说八道。王思聪就曾经说过,人工智能什么时候说,这个问题我不会,就进化了。

shaoxiyu
回复

shaoxiyu

3小时前

AI在讨好你

just
回复

just

3小时前

盲目的相信遇到了盲目的自信!

sky
回复

sky

5小时前

幻觉一切

131****6678
回复

131****6678

7小时前

文章观点独特,角度“刁钻”,有独特见解,好!

逃跑的树
回复

逃跑的树

11小时前

人类必将成为技术的奴隶

文暘(克己复礼)
回复

文暘(克己复礼)

11小时前

看过此篇,如醍醐灌顶,为我如何使用AI提供了新的方向;同时也让我冷汗直流,不知不觉间,AI已经把我带到了一个虚幻的梦境中

martinmars03
回复

martinmars03

12小时前

这才是AI的内核:只做形式的搬运工

小小杨不小了
回复

小小杨不小了

22小时前

👌

天行健
回复

天行健

22小时前

看后深受启发!

南周用户
回复

南周用户

24小时前

警惕ai陷阱

183****2883
回复

183****2883

03-22

指鹿为马是人类的创造,再强大的AI恐怕也很难学得会,人类的发展就是一次又一次的指鹿为马的过程,并不是靠算力取胜。本质上就是赋权的过程,AI只知道结果,决定了再怎么打造也就是个跳梁小丑,取悦的工具罢了。

sky
回复

sky

03-22

其实,回答的内容,再做个验证工作,标注信息可靠度,学习回归下。

dongtian
回复

dongtian

03-22

心想事成吧?

139****6263
回复

139****6263

03-22

AI幻觉,一本正经地胡说八道骗你。从此,怀疑的种子无处不在。