当心,“AI”可能在欺骗你

2025-06-11 23:45:47来源:鹿财经原创lucaijing.com.cn编辑:毛青青

扫一扫

分享文章到微信

扫一扫

关注鹿财经网微信公众号

  近日,国家互联网信息办公室等四部门联合发布《人工智能生成合成内容标识办法》(以下简称《标识办法》),自2025年9月1日起施行。旨在通过显式和隐式标识规范人工智能生成内容的管理‌。《标识办法》明确了服务提供者、传播平台及用户的责任,要求对文本、图片、音频等生成内容进行全过程标识管理,以维护公共利益和公民权益。

  ‌‌在AI技术狂飙突进的今天,我们正面临一个令人细思恐极的隐患——AI生成的内容可能通过“自我引用”完成造假闭环,让虚构变成事实。这一过程中,平台审核漏洞、技术滥用与数据污染的叠加效应,正在为虚假信息的“永动循环”提供温床。

  不加标注的发表AI生成内容,会导致AI内容从无中生有摇身一变,成为权威引用。AI生成内容的本质是基于概率模型的文本重组,而非对真实世界的客观反映。例如,某些AI工具可根据指令批量生成虚构的“科学研究结论”或“社会事件描述”,这些内容往往缺乏真实数据支撑,却因逻辑通顺而极具迷惑性。例如,某用户要求AI生成“某城市限制外卖配送政策”的文案,AI快速输出包含虚构政策细节的内容,随后该内容被自媒体平台发布,未标注AI来源,成为“新闻”。当未标注AI来源的虚假内容不加任何标注的通过平台审核后,其传播过程即被赋予“社会存在感”。更危险的是,其他AI系统在抓取网络数据训练时,可能将这些虚假内容视为“真实信息”纳入语料库,形成数据污染。该“某城市限制外卖配送政策”文案被某网站发布后,其他AI在回答相关问题时直接引用该文章,形成“自证循环”。

  AI造假闭环的形成原因主要有以下两个方面:一是因为技术缺陷,在《标识办法》正式施行之前,AI生成的内容没有添加显式或隐式标识,导致其混入语料库,产生持续污染。部分作者为追求流量,故意隐瞒AI创作事实进行传播,加剧造假闭环风险;二是由于平台责任缺失,审核机制流于形式。依赖简单的关键词过滤,无法识别深度伪造的逻辑矛盾。对于AI生成文章中的数据,不加以核实和探究,致使虚假数据出现在权威平台。

  如何防止AI造假的扩张呢?给AI生成合成内容添加标识,是从源头上治理AI造假的有效手段。如果把AI生成合成内容比作一种特殊产品,制作内容的AI服务商就是厂家,传播内容的网络平台就是商店。《标识办法》规定,厂家在产品出厂时要贴上标识引起商店关注,商店也要在销售时通过贴标识等方式提醒消费者注意。其作用就是从内容生产和传播的源头入手,给“AI生产”打上识别码,使其更容易被网络平台检得出、被社会公众看得见。公众知道眼前信息源自AI,也就不会轻易上当受骗。

  与此同时,我们还要积极主动地构建制度——平台——公众三道防线。相关部门要严格落实《标识办法》,加大AI监管,对纵容AI造假的平台实施相应处罚;平台要落实全链路审核,对未标识内容实施“默认拦截”,并对AI内容进行专项数据交叉验证;向公众普及“AI内容鉴别知识”,主动对AI提供的数据鉴别真伪。此外,AI开发团队还应建立官方认证的AI训练数据池,对公共领域信息进行真实性核验与标注,阻断污染数据流入训练环节。

  AI造假不仅是技术上的问题,更是对人类社会信任的挑战。若放任闭环形成,我们将陷入“所有信息皆可疑”的认知荒漠。唯有通过制度约束、平台监管与公众觉醒的协同,才能让AI真正成为“辅人”而非“毁人”的工具。正如《标识办法》所强调的:“AI可以拟人、助人,但不能骗人、坑人”。在这场与技术的赛跑中,人类的清醒与警惕,仍是最重要的防线。(高瑞阔)

     投稿邮箱:lukejiwang@163.com   详情访问鹿财经网:http://www.lucaijing.com.cn

相关推荐
千年古刹拆“门墙”,文化惠民树标杆 千年古刹拆“门墙”,文化惠民树标杆

11月19日,杭州西湖灵隐飞来峰景区(含灵隐寺、永福寺、韬光寺)宣布自2025年

原创观点2025-11-24

高铁赶圩:当“中国速度”邂逅“千年烟火” 高铁赶圩:当“中国速度”邂逅“千年烟火”

来呀咿呀咿呀哟,坐着高铁去赶圩哟!侗族大歌的欢快旋律,不在深山侗寨,而

原创观点2025-11-24

羽绒服里的“丝绒之辨”,不能只靠消费者“火 羽绒服里的“丝绒之辨”,不能只靠消费者“火

根据《人民日报》11月3日报道,随着天气转冷,羽绒服市场迎来销售旺季,然而

原创观点2025-11-03

铁路敬老上“新”,“银龄”服务“破圈”而来 铁路敬老上“新”,“银龄”服务“破圈”而来

重阳节前夕,柳州机车车辆有限公司雷锋街市银龄服务队志愿者如约上门,为出

原创观点2025-11-03

把“鸡排”的热度变为城市的温度与深度 把“鸡排”的热度变为城市的温度与深度

一块6元的鸡排,为何能让游客甘愿排队五小时?这个国庆假期,景德镇鸡排哥

原创观点2025-10-10

铁路“轨道上的旅游圈”加速成型 铁路“轨道上的旅游圈”加速成型

9月28日,从国铁南宁局了解到,为期12天的铁路国庆中秋假期运输今日启动,

原创观点2025-10-02

“天空之境号”形成“旅游引流、产业变现”良 “天空之境号”形成“旅游引流、产业变现”良

经过四个多小时行驶,天空之镜号旅游专列车于6月21日13时23分抵达青海茶卡盐

原创观点2025-07-09

天空之境号形成“旅游引流、产业变现”良性循 天空之境号形成“旅游引流、产业变现”良性循

经过四个多小时行驶,天空之镜号旅游专列车于6月21日13时23分抵达青海茶卡盐

原创观点2025-06-30

高铁“同城化”效应提升公共服务均等化水平 高铁“同城化”效应提升公共服务均等化水平

开行南宁东上海虹桥间G500/499次大站快车,全程旅时压缩1.5小时,使南宁、上海

原创观点2025-06-30

时速350公里!沪昆高铁杭长段开启“加速度”新征 时速350公里!沪昆高铁杭长段开启“加速度”新征

沪昆高铁杭州东至长沙南段安全标准示范线建设拉通试验顺利完成,意味着不久

原创观点2025-06-25