合成媒体
合成媒体 是什么?
合成媒体由生成式 AI 制作或大量修改的音频、图像、视频或文本内容,而非直接从物理世界采集得到的素材。
合成媒体是涵盖深度伪造、AI 生成语音、文生图艺术、AI 撰写文章、AI 头像等的统称。并非所有合成媒体都具有恶意——创意创作、无障碍辅助、本地化等正当用途广泛存在——但同样的技术也能驱动虚假信息、欺诈、骚扰与身份攻击。多家标准组织推动来源与透明度的实践,如 C2PA Content Credentials、JPEG Trust、IPTC 元数据,以及 Google SynthID 等水印方案。欧盟《人工智能法》及多国法律要求在用户与合成媒体交互时明确披露。安全团队既将其视为威胁向量(深度伪造、欺诈),也视其为需治理的资产(营销、客服、训练数据等),需要来源管理、标注与治理。
● 示例
- 01
经 C2PA 签名的新闻图片,被标注为包含 AI 生成元素。
- 02
本地化产品视频中,发言人的声音通过克隆模型重新生成为八种语言。
● 常见问题
合成媒体 是什么?
由生成式 AI 制作或大量修改的音频、图像、视频或文本内容,而非直接从物理世界采集得到的素材。 它属于网络安全的 AI 与机器学习安全 分类。
合成媒体 是什么意思?
由生成式 AI 制作或大量修改的音频、图像、视频或文本内容,而非直接从物理世界采集得到的素材。
合成媒体 是如何工作的?
合成媒体是涵盖深度伪造、AI 生成语音、文生图艺术、AI 撰写文章、AI 头像等的统称。并非所有合成媒体都具有恶意——创意创作、无障碍辅助、本地化等正当用途广泛存在——但同样的技术也能驱动虚假信息、欺诈、骚扰与身份攻击。多家标准组织推动来源与透明度的实践,如 C2PA Content Credentials、JPEG Trust、IPTC 元数据,以及 Google SynthID 等水印方案。欧盟《人工智能法》及多国法律要求在用户与合成媒体交互时明确披露。安全团队既将其视为威胁向量(深度伪造、欺诈),也视其为需治理的资产(营销、客服、训练数据等),需要来源管理、标注与治理。
如何防御 合成媒体?
针对 合成媒体 的防御通常结合技术控制与运营实践,详见上方完整定义。
合成媒体 还有哪些其他名称?
常见的别称包括: AI 生成媒体, 生成式媒体。
● 相关术语
- ai-security№ 297
深度伪造(Deepfake)
由 AI 生成、能以假乱真地呈现真实人物说出或做出未曾发生之事的合成音视频或图像。
- ai-security№ 035
AI 水印
在 AI 生成内容中嵌入可检测信号的技术,用于事后验证其来源、所属模型或与训练集的关联。
- ai-security№ 026
AI 内容检测
用于估计一段文本、图像、音频或视频是否由 AI 模型生成、而非来自人类的工具和技术。
- ai-security№ 027
AI 治理
组织和监管机构用于确保 AI 系统以负责任、合法方式开发、部署与运营的政策、流程、角色与控制的总和。
- ai-security№ 034
AI 供应链风险
组织在构建和部署 AI 系统时所组合的第三方数据集、基础模型、依赖库、插件与基础设施带来的威胁集合。
- ai-security№ 033
AI 安全(Safety)
致力于防止 AI 系统对用户、运营者及社会造成非预期危害的学科,涵盖技术、运营与社会三个维度。
● 参见
- № 729Nightshade 攻击