AI技术被利用生成虚假地铁事故视频
「一女子利用AI工具生成上海地铁虚假事故视频并传播,被警方依法行政拘留。该事件揭示了AI技术被滥用于网络谣言制造的新趋势。」
近日,一起利用人工智能技术生成虚假视频并传播的事件引发关注。据悉,一名外地女子孙某为博取网络流量,使用AI工具将上海地铁18号线江浦路站换乘通道顶部少量墙皮脱落的真实情况,篡改并生成为“上海地铁站内顶部大面积坠落”的虚假视频。该视频仿真度极高,发布后迅速在微信视频号上传播,造成了网民的恐慌和恶劣社会影响。
据了解,真实情况是上海地铁18号线江浦路站换乘通道顶部发生少量墙皮脱落,现场无人员伤亡。地铁工作人员已及时设立警示牌,初步判断脱落系渗水导致,并完成了初步维修。然而,外省市的孙某在看到该消息后,并未核实事实,而是利用AI工具对信息进行“移花接木”式的加工,生成了极具误导性的虚假内容。
轨交警方在兄弟省市公安机关的紧密协作下,迅速锁定了违法行为人孙某并将其抓获。目前,孙某因涉嫌制造和传播网络谣言,已被警方依法处以行政拘留。这一案例再次凸显了AI技术在内容生成领域被滥用的风险。随着AI生成图文、音视频技术的日益成熟,其仿真度和误导性不断增强,已成为网络谣言传播的一种新趋势。
从技术角度看,此类AI工具通常基于深度学习模型,能够对输入的文字或图像进行智能分析和再生成。例如,通过生成对抗网络(GANs)或扩散模型,用户可以轻松创建出与真实场景高度相似的虚假视频。这种技术的易用性和低成本,降低了造谣的门槛,使得不法分子能够快速炮制出看似可信的虚假信息。这要求AI开发者和平台运营方在技术层面加强内容审核和溯源机制,例如通过数字水印、内容指纹等技术手段来识别和追踪AI生成内容。
对于普通网民而言,面对此类高仿真度的网络信息,应保持审慎态度,做到不信谣、不传谣。在转发或分享前,应通过官方渠道或权威媒体核实信息真实性。同时,AI技术本身并无善恶,关键在于使用者的动机和监管的完善。这一事件也提醒业界,在推动AI技术创新的同时,需同步加强伦理规范和法律法规建设,防止技术被用于破坏社会秩序的行为。
来源:Heooo AI工具导航