牛津大学研究团队发现生成式 AI 可能遭遇“模型崩溃”
创始人
2024-09-05 11:52:22
0次

【环球网科技综合报道】9月5日消息,据《福布斯》报道,牛津大学的伊利亚·舒梅洛夫博士及其团队在《自然》杂志上发表了一项研究,指出当生成式 AI 软件仅依赖 AI 生成的内容时,其输出答案的质量会迅速下降。

研究显示,在经过两次查询后,AI 的回答开始出现偏差,到了第五次查询,质量明显降低,而到了第九次连续查询,回答已经退化为无意义的内容。这种现象被研究团队称为“模型崩溃”,即 AI 在不断使用自身生成的数据进行训练后,输出的内容逐渐脱离现实,最终变得毫无价值。

舒梅洛夫博士指出,模型崩溃的发生速度之快和难以察觉的程度令人惊讶。它首先影响的是那些代表性不足的数据,然后是输出的多样性,最终导致整体数据表现的恶化。这种崩溃可能会带来严重的后果。

为了验证“模型崩溃”的存在,研究人员采用了一种方法:他们使用了一个预训练的 AI 驱动的维基百科,并让 AI 模型基于自己生成的内容进行更新。随着受污染数据的累积,原本的训练集被侵蚀,输出的信息质量也随之下降。例如,在研究中的一个案例里,维基百科的条目在经过多次查询循环后,内容从14世纪英国教堂尖顶的介绍滑稽地转变为关于各种颜色短尾兔子的论文。

此外,亚马逊网络服务团队在6月发布的研究显示,大约57%的网络文本都经过了 AI 算法的翻译。如果互联网上的人类生成数据被 AI 过滤内容迅速覆盖,且舒梅洛夫博士的研究发现属实,那么 AI 可能正处于一种“自我毁灭”的状态,同时也在“毁灭”互联网。

研究得出的结论是,为了确保 AI 的长期可持续发展,必须确保其能够访问现有的非 AI 生成内容,并持续引入新的人工生成内容,以避免模型崩溃的发生。

相关内容

热门资讯

国产大模型下调推理服务价格,南... 近日,国内某大模型企业宣布下调其flash系列模型服务价格,输入缓存命中、输入缓存未命中及输出价格最...
解码青年人AI生活《2026有... 中新网深圳9月5日电(记者索有为)《2026有意思生活方式报告》(下称《报告》)4日在全国首个有意思...
OpenAI 最强 AI 生图... 9月9日消息,OpenAI 9 月 9 日官宣发布 ChatGPT Images 2.5,图像生成延...
探索AI供应链产业化路径京东推... 2026年以来,人工智能应用范围加速拓展,持续从数字空间走向现实生活,广泛融入生产线、仓储厂房、配送...
教育部发文!AI生成内容,教师... 一篇论文,因为AI使用不当,相关高校师生被通报处理。 9月2日,安徽财经大学公布“教师与学生涉嫌学术...
AI识别出近800种可充当乳化... 英国利兹大学食品科学与营养学院和爱丁堡大学科学家携手,开发出一款 人工智能(AI)工具,能从数千万种...
搭上低空经济、AI文旅?两连板... 桂林旅游(000978)回应市场热点。 9月8日,桂林旅游再度涨停,斩获2连板。当天晚间,该公司披露...
硅谷:我们不能被硅谷“AI刹车... 【文/底线思维】 OpenAI首席科学家Jakub Pachocki最近写了一篇文章,题目叫《An ...