AI比人类更爱拍马屁?研究称AI的讨好倾向正在损害科研
创始人
2025-10-28 21:46:02
0

电影《她》(2013)剧照。

这项研究以预印本的形式发布在arXiv服务器上,测试了11个广泛使用的大型语言模型(LLM)如何回应超过11500个寻求建议的查询,其中包括许多描述不当行为或伤害的内容。

结果显示,AI聊天机器人(包括ChatGPT、DeepSeek、Gemini等)经常为用户加油鼓劲,给予他们过分奉承的反馈,并调整回应以附和他们的观点,有时甚至以牺牲准确性为代价。分析AI行为的研究人员表示,这种被称为“奉承”(sycophancy)的讨好倾向,正在影响他们如何在科学研究中使用AI,涵盖了从头脑风暴、生成假设到推理和分析等各种任务。

“‘奉承’本质上意味着模型相信用户所说的话是正确的,”苏黎世联邦理工学院的数据科学博士生Jasper Dekoninck说。“知道这些模型有奉承倾向,让我在给它们任何问题时都变得非常谨慎,”他补充道。“我总是会仔细检查它们写的每一个字。”位于马萨诸塞州波士顿的哈佛大学生物医学信息学研究员Marinka Zitnik表示,AI的奉承“在生物学和医学领域非常危险,错误的假设可能会带来实实在在的代价”。

在这项研究中,研究人员测试了AI的奉承倾向是否会影响其解决数学问题的能力。研究人员使用了今年竞赛中的504个数学问题设计了实验,他们修改了每个定理陈述,引入了细微的错误。然后,他们要求四个大语言模型为这些有缺陷的陈述提供证明。如果模型未能检测到陈述中的错误,并进而“幻觉”出一个证明,作者就认为该模型的回答是“奉承”的。

研究人员补充说,AI的奉承倾向似乎在人们使用AI聊天机器人进行学习时表现得最为明显,因此未来的研究应该探索“人类在学习数学时常犯的典型错误”。

此外,AI的奉承倾向已经渗透到他们使用大语言模型的许多任务中。有人工智能领域的研究员表示,当她使用ChatGPT来总结论文和整理思路,这些工具有时会照搬她的输入内容,而不去核查来源。多智能体系统也被观察到了类似的情况,这些系统集成了多个大语言模型来执行复杂的多步骤流程,例如分析大型生物数据集、识别药物靶点和生成假设。

参考资料:

(1)AI chatbots are sycophants — researchers say it’s harming science

https://www.nature.com/articles/d41586-025-03390-0

编译/李永博

编辑/罗东

校对/穆祥桐

相关内容

最新资讯

河南一乡镇幼儿园因硬核体能课走... 近日,河南省商丘市一家农村幼儿园变成了“练兵场”,引发了社会关注。据央视新闻报道,3到6岁的孩子们最...
第五代瑞虎8上市抢鲜价9.29... 【文/财圈社&道哥说车 麻建宇】“奇瑞坚信没有落后的能源形式,只有落后的技术与体验”,奇瑞汽车常务副...
AMG纯电“小钢炮”GLA E... IT之家 11 月 11 日消息,据外媒 Carscoops 今日报道,作为梅赛德斯-奔驰的性能部门...
第五代瑞虎8正式上市,限时售价... 11月10日,第五代瑞虎8在北京正式全球上市。新车共推出4款配置车型,官方指导价为9.99万-12....
东风奕派eπ007+上市,14... 在新能源汽车市场竞争愈发激烈的当下,东风奕派于品牌成立两周年之际,在深圳大湾区推出全新车型eπ007...
浙江出海大卖冲刺A+H上市,9... 据讯,11月2号,已经在创业板上市的浙江知名大卖——涛涛车业(浙江涛涛车业股份有限公司)正式向港交所...
全系标配磁流变悬架!深蓝L06... 深蓝汽车旗下全新中型轿车——深蓝L06,将于11月18日正式上市。该车此前已开启预售,共推出4款配置...
只卖4.99万!刘强东新车吓了... 刘强东骨子里就有着股冒险精神 ,他酷爱越野,2008年汶川地震时还亲自开着越野车赶赴灾区参与救援。他...
原创 售... 导读:日前,2026款沃尔沃XC90上市,提供燃油版(B5/B6)和插混版(T8)车型,其中燃油版提...
高端进化 智慧破界 全新启明星... 近日,以“高端进化 智慧新生”为主题的欧马可启明星平台产品品鉴之旅在广州隆重举行。福田欧马可携全新平...