每日新闻网
网站首页 每日要闻要闻快讯纪实现场专题报道社会热点就案说法海疆之声 成为会员
每日地方诗坛荟萃焦点网谈生态环境热点追踪群众来信乡村振兴企业风采监督与法名人字画人物·访谈关注民生人民视点文化·旅游科技前沿快闪中国深度观察名医·健康关于我们免责声明联系我们 人员查询
  • 浙江
  • 新疆
  • 内蒙古
  • 吉林
  • 重庆
  • 辽宁
  • 贵州
  • 四川
  • 海南
  • 云南
  • 福建
  • 台湾
  • 江西
  • 湖南
  • 湖北
  • 河南
  • 广西
  • 江苏
  • 安徽
  • 山东
  • 青海
  • 甘肃
  • 陕西
  • 山西
  • 河北
  • 黑龙江
  • 天津
  • 上海
  • 北京
  • 广东
  • 宁夏
  • 西藏
每日新闻网 > 焦点网谈 > 生成式AI“幻觉”困境如何破解

生成式AI“幻觉”困境如何破解

来源:中国青年网 | 时间:2025-02-01 17:17:08 | 点击:810

人工智能(AI)技术正以前所未有的速度发展,生成式AI凭借其惊人的创造力,不断刷新人们的认知。然而,即便是看似“聪明绝顶”的AI,也难逃“幻觉”的困扰。这里的“幻觉”,指的是AI生成看似合理但实际不准确或虚假的信息。

英国《自然》杂志网站在1月22日的报道中指出,AI“幻觉”可能会引发严重后果,科学家正各出奇招,力求降低其发生率。这些措施包括增加事实核查、对AI进行“脑部扫描”等,以促进AI的健康、高效发展。

主因是数据模糊

各种生成式AI,包括由大语言模型驱动的聊天机器人,常常会编造信息。它们有时会模糊事实与虚构,在看似真实的陈述中夹杂错误信息。这既是其创造力的体现,也是其不足之处。

美国佐治亚理工学院理论计算机科学家桑托什·威姆帕拉解释称,大语言模型的设计原理并非输出准确事实,而是通过模式识别生成答案。其内部复杂的运行机制迄今仍像一个“黑匣子”,人们难以洞悉其推理过程。

美国加州Vectara公司旨在减少生成式AI的“幻觉”。其联合创始人阿姆尔·阿瓦达拉表示,在训练过程中,这些模型会压缩数万亿个单词间的关系,随后通过一个庞大的网络模型重新展开这些信息。尽管这些模型能够重构出接近98%的训练内容,但剩下2%的内容却会让其“误入歧途”,生成不准确或虚假信息。

导致AI出现“幻觉”的原因多种多样,其中训练数据中的模糊性和错误是常见因素。也有人认为,即使训练数据准确无误,AI也有可能产生“幻觉”。这种现象与某一事实的稀缺程度密切相关。因此,即使经过人类反馈调整过的聊天机器人,也无法完全避免出错。

多领域面临考验

AI的“幻觉”可能会给人们的工作和生活带来较大影响。

在新闻领域,大语言模型可能生成虚假新闻事件,扰乱信息传播秩序,误导公众认知。Vectara公司针对文档内容开展的研究表明,一些聊天机器人编造事实、虚构信息的几率高达30%。世界经济论坛发布的《2025年全球风险报告》显示,错误和虚假信息是2025年全球面临的五大风险之一。

在法律领域,它可能引用虚构的法律条文和案例。比如,2023年美国律师史蒂文·施瓦茨就因“轻信”ChatGPT,在法庭文件中引用了并不存在的法律案例。而在医学领域,它可能提供错误的诊断和治疗建议,危及患者生命。

《自然》在报道中指出,AI“幻觉”在科学参考文献方面出现错误的情况也极为普遍。2024年的一项研究发现,各类聊天机器人在提及参考文献时的出错率在30%至90%之间。它们至少会在论文标题、第一作者或发表年份上出现偏差。虽然聊天机器人都带有警告标签,提醒用户对重要信息进行二次核实。但如果用户对聊天机器人的回复深信不疑,可能会引发一系列问题。

多举措减少“幻觉”

为进一步提升AI的精确度,科学家正想方设法降低其“幻觉”。

例如,增加模型训练参数和训练时长可有效减少“幻觉”。但这种方法需要付出高昂的计算成本,并可能削弱聊天机器人的其他能力,如机器学习算法对未知数据的预测和处理能力。

此外,使用更大、更干净的数据集进行训练,也是降低AI模型“幻觉”出现的有效途径。然而,当前可用数据的有限性限制了这一方法的应用。

检索增强生成(RAG)技术也为减少AI“幻觉”提供了新思路。该方法通过让聊天机器人在回复问题前参考给定的可信文本,从而确保回复内容的真实性,以此减少“幻觉”的产生。在医疗和法律等需要严格遵循经过验证的知识的领域,RAG技术备受青睐。

不过,美国斯坦福大学计算机科学家米拉柯·苏兹根表示,尽管RAG能提升内容真实性,但其能力有限。苏兹根团队的研究表明,一些为法律研究开发的、号称“无幻觉”的RAG增强模型虽有所改进,但仍存在不足。

开发者也可以使用一个与AI训练方式不同的独立系统,通过网络搜索对聊天机器人的回复进行事实核查,谷歌的“双子星”系统便是一个典型例子。该系统提供了“双重核查响应”功能:内容如果突出显示为绿色,表示其已通过网络搜索验证;内容如果突出显示为棕色,则表示其为有争议或不确定的内容。但是,这种方法计算成本高昂且耗时,而且系统仍会产生“幻觉”,因为互联网上错误信息泛滥。

在去年6月出版的《自然》杂志上,英国牛津大学科学家刊发论文称,他们利用“语义熵”,通过概率来判断大语言模型是否出现了“幻觉”。语义熵是信息熵的一种,被用于量化物理系统中所包含的信息量。通过评估AI模型在特定提示词下生成内容的不确定性,来计算模型的困惑程度,从而为用户或模型提供警示,提醒其采取必要的循证措施,确保更准确的答案输出。

美国卡内基梅隆AI研究人员安迪·邹采用的方法是在大语言模型回答问题时,绘制其内部计算节点的激活模式。他形象地称之为“给AI做脑部扫描”。利用不同的计算节点活动模式,可以告诉我们AI模型是在“说真话”,还是在“胡说八道”。(记者 刘 霞)

责任编辑:蒋宇骏


【作者:】

文章评论
评论
全部评论
更多推荐

2026年服贸会明天开幕 各项筹备工作全部就绪

央视网消息(新闻联播):2026年中国国际服务贸易交易会将于9月9日在北京开幕,目前各项筹备工作已全部就绪。本届服贸会以“全球服务、互惠共享”为主题,设置主题展和九大专题展。聚焦服务贸易发展前沿趋势,首次设置中国服务案例...

这所大学,为何总悄悄往学生饭卡打钱?

近日,南京理工大学  一项“悄悄打钱”的举措  再次打动无数网友  无需申请,不公示名单,数据找人  这种“帮你,但不打扰你”的帮扶方式  学校已经默默坚持了10年  △网友评论截图  01  今年大三的学生小宁(化名)...

水利部:尼泊尔错坚河冲击坑上下游过流正常

记者从水利部了解到,根据最新的无人机和遥感影像分析,尼泊尔错坚河冲击坑上下游过流正常。  原普热普强藏布堰塞湖下游小规模滑坡体无明显变化,河道过流正常,河道两侧山体受泥石流影响明显,仍存在滑坡体进一步垮塌形成新堰塞湖的风...

一波音货机在美迈阿密国际机场冲出跑道 撞上多辆汽车后起火

  当地时间9月6日,据美国联邦航空管理局消息称,当日下午,一架从波多黎各起飞的波音767-300货机在迈阿密国际机场降落后冲出跑道。现场视频显示,这架大型货机已冲出机场区域,撞上多辆车辆,并起火燃烧。  迈阿密国际机场...

俄总统助理:普京与美总统特使会见超3小时

  俄罗斯总统助理乌沙科夫6日凌晨说,俄总统普京5日晚在克里姆林宫与美国总统特朗普的特使威特科夫和女婿库什纳的会见超过3个小时,内容充实且“具有建设性”。  乌沙科夫说,俄方对当前局势作出了明确而全面的评估,包括特别军事...

自然资源部对江西启动地质灾害防御Ⅲ级响应

  央视网消息:据自然资源部消息,根据《自然资源部地质灾害防御响应工作方案》,结合江西吉安发生疑似泥石流灾害灾情情况,自然资源部于9月5日11时将江西地质灾害防御响应等级由IV级提升为Ⅲ级,并派司局级同志带队的工作组赴现...

尼泊尔泥石流遇难人数升至1295人 失联4898人

  根据尼泊尔警方公布的最新数据,截至当地时间9月4日17时,尼泊尔泥石流灾害造成的遇难人数升至1295人,失联人数为4898人。  8月26日,尼泊尔北部热索瓦地区发生大规模泥石流灾害。尼泊尔政府26日决定,依据相关法...

第20届亚运会中国体育代表团成立

今天(4日),参加第20届亚运会的中国体育代表团在北京成立。2026年爱知名古屋亚运会将于9月19日至10月4日进行。  (总台央视记者 杨威) 编辑:黄佐春 责任编辑:刘亮

探访福建省政协“为闽协商、为民服务”履职一线|讲好“中国式商量”故事

八月的福建,央视网记者跟随“理响中国·讲好‘中国式商量’故事”网络主题采访活动,深入福建省政协履职一线。从福州长乐机场出发厅通行时限的调整,到南平保温产业工人的考证难题的解决;从建宁黄桃的电商销售的开通,到平潭涉台商事纠...

世卫组织:刚果(金)埃博拉疫情仍在快速扩散

  当地时间9月2日,世界卫生组织表示,刚果(金)本轮埃博拉疫情仍在快速扩散,这是该国有记录以来规模最大的埃博拉疫情,传播速度也超过该国以往任何一次埃博拉疫情。  世卫组织指出,目前疫情仍存在未被发现的传播链,部分病例死...

2025
02/01
17:17
浏览量: 810
大字号
分享
今日热点
这所大学,为何总悄悄往学生饭卡打钱?

这所大学,为何总悄悄往学生饭卡打钱?

一波音货机在美迈阿密国际机场冲出跑道 撞上多辆汽车后起火

一波音货机在美迈阿密国际机场冲出跑道 撞上多辆汽车后起火

俄总统助理:普京与美总统特使会见超3小时

俄总统助理:普京与美总统特使会见超3小时

世卫组织:刚果(金)埃博拉疫情仍在快速扩散

世卫组织:刚果(金)埃博拉疫情仍在快速扩散

国际货币基金组织总裁:全球经济前景仍面临高不确定性

国际货币基金组织总裁:全球经济前景仍面临高不确定性



友情链接

  • 人民网
  • 与法同行网
  • 海彊之声
  • 小红书
  • 中国长安网
  • 海外网
  • 中国警察网
  • 中国老区网
  • 新华网
  • 中国台湾网
  • 中国政府网
  • 中国经济网
  • 中国新闻网
  • 每日新闻网
  • 光明网
  • 央视网
  • 法制网
  • 中国青年网
  • 求是网
  • 关于我们         联系我们         免责声明         人员查询

    • 扫码看全网内容

    地址:北京石景山区古城南街9号院绿地环球文化城6号楼18层1828号 联系电话:电话/传真010-88117470 010–52463177 18611141167(微信同号)邮箱1026329972@qq.com (每日新闻)
    网站备案/许可证工信部:京ICP备工信部:2025111695号-3 京公网安备11010702003042号
    每日新闻网https://www.everyday-news.co/提供最新国内外新闻及新闻资讯
    每日新闻网秉承“新闻视野、文化视角、思想深度、理论高度、脚踏实地”的理念,运用互联网的快速传播技术和丰富的移动链接平台,一贯正确引导社会思想意识,传播优秀文化,凝聚民族精神,彰显快速展示网络舆论的优势。