当前位置: 首页 » 资讯 » 新科技 » 正文

警惕AI数据投毒!仅 0.01% 的虚假文本就能增加 AI 有害输出 11.2%

IP属地 中国·北京 编辑:顾青青 Chinaz 时间:2025-08-05 10:24:02

近期,国家安全部发布警告,提醒公众注意人工智能领域的数据污染问题。随着人工智能技术在社会经济中扮演越来越重要的角色,训练数据的质量显得尤为关键。国家安全部指出,虚假信息、偏见观点以及其他不良数据正严重影响 AI 的性能,给社会带来了新的安全隐患。

图源备注:图片由AI生成,图片授权服务商Midjourney

人工智能的核心要素包括算法、算力和数据,其中数据是训练 AI 模型的重要基础。大量高质量的数据能够帮助 AI 更好地学习内在规律,实现智能决策与内容生成。然而,当数据中掺杂了虚假信息时,就会对 AI 模型产生严重的负面影响。研究表明,仅有0.01% 的虚假文本就能导致 AI 系统输出有害内容的概率增加11.2%。即便是0.001% 的虚假文本,也会导致有害输出上升7.2%。

数据污染不仅会影响 AI 模型的准确性和性能,还可能导致一系列现实风险。例如,在金融领域,不法分子可能利用 AI 生成的虚假信息来操纵市场,导致股价异常波动。在公共安全方面,数据污染可能误导舆论,甚至引发社会恐慌。而在医疗健康领域,虚假的数据可能导致错误的诊疗建议,危害患者的生命安全。

为了应对数据污染带来的威胁,国家安全部建议加强源头监管,防止污染数据的产生。依据《网络安全法》《数据安全法》和《个人信息保护法》等法律,建立 AI 数据的分类分级保护制度,确保数据的安全性。同时,还需强化风险评估,保障数据在全生命周期内的安全流通。此外,定期对受污染的数据进行清洗和修复,以构建有效的数据治理框架,从根本上提高 AI 的数据安全能力。

国家安全部的发文提醒我们,面对人工智能快速发展的时代,确保数据的真实与安全是维护社会各领域安全的重要一环。

划重点:

免责声明:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其内容真实性、完整性不作任何保证或承诺。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。