近日，国家网信办公布了《人工智能生成合成内容标识办法（征求意见稿）》（以下简称《征求意见稿》），并面向社会公开征求意见，意见反馈截止时间为10月14日。《征求意见稿》提出，人工智能生成合成内容是指利用人工智能技术制作、生成、合成的文本、图片、音频、视频等信息。
2024年10月，一则标题为“大妈摆摊卖水果被罚16万，监管局回应不交就罚145万”的文章在网络上广为流传，引发众多网民关注和议论。经调查，这篇文章是一家公司AI炮制出来的，它的背后，隐藏着怎样一个产业链？
近日，西藏定日县发生6.8级地震，灾情牵动人心。然而就在此时，也有个别人别有用心地用地震题材蹭热度，编造虚假信息，制造恐慌，被警方处罚。据山西网警1月10日发布消息称，1月7日，有人在某短视频平台发布消息称，“大同1月6日晚上12点发生了9.
本文为今日头条独家发布在数字化浪潮汹涌的当下，人工智能（AI）技术宛如一把双刃剑，在为社会发展带来无限机遇的同时，也滋生出了一系列棘手问题。其中，AI 生成虚假信息的泛滥，正以惊人的速度侵蚀着网络信息空间，成为亟待破解的严峻挑战。
AI（人工智能）在便捷人类工作、生活的同时，其双刃剑效应也日渐被重视——有人利用生成式文本技术制造虚假资讯、有人利用“深度伪造技术”颠覆视听真实边界、有人利用“智能仿生体”编织骗局以假乱真……今年春节期间，一名用户假冒DeepSeek创始人梁文锋发文，后被证明是AI生成的虚假内容
为何这些网文读来似曾相识三人用AI软件生成近10万篇虚假文章牟利被公诉今年4月初，有专业媒体发布了一篇关于“骨灰房”的调查报道，引发广泛关注。很快，网上就出现了一篇“上海市宝山区也有骨灰房”的文章，说得有鼻子有眼。
文｜胡炜（新京报传媒研究院）在当下，AI创作正是风口，不少媒体人担心有人利用AI生成（伪造）新闻现场照片甚至视频。果然，怕什么就来什么：近日，在西藏日喀则市定日县发生的地震灾害牵动人心，就在大家为灾区揪心、全力救援之时，一些AI生成的虚假影像在社交平台上广泛传播，引发误导。
近年来，随着人工智能技术的日益火爆，在网络上编造和传播谣言的成本也变得更低。利用AI合成技术编造谣言，甚至生成逼近真实的图片、音视频，颠覆了“有图就有真相”的常规认知，让人难辨真假。今年1月，某网络平台出现一条关于“西安爆炸”的消息。
6月14日，据央视新闻报道，一MCN机构实际控制人王某某，通过具有语音交互功能的AI软件，说出关键词，自动在网络上抓取相关信息，生成几百到上千字的文本，并配上貌似和事件具有相关性的虚假图片，从而形成一段看起来信息量很大，实际上子虚乌有的内容。
有MCN机构利用人工智能程序日产上千篇虚假新闻，导致大量不实信息在网上病毒式传播；某小说平台账号依靠AI“创作”，每日更新十几本电子书，行文却逻辑不通、辞藻空洞；医学论文因使用AI生成的虚假配图而被撤稿……当前，AI生成、伪造或篡改文本、图片、音频和视频的现象越来越普遍，大量粗制
