AI 图片橡皮擦来了!概念半透膜模型SPM实现精准擦除特定内容,还能改头换面
划重点:
⭐ 清华大学与阿里合作推出概念半透膜模型,能够精准、可控地擦除各类具象或抽象概念。
⭐ 该模型已被 CVPR2024会议高分录用,具有在 Diffusion 架构的 AI 作图模型中擦除特定概念的能力。
⭐ 模型通过一维 Adapter 和微调策略实现概念擦除,同时保留其他生成内容,并可动态适配擦除信号。
清华大学与阿里安全联合发布了概念半透膜模型(SPM),这一模型能够在 Diffusion 架构的 AI 作图模型中,精准、可控地擦除各类具象或抽象概念。
该模型的推出解决了传统 AI 作图模型存在的生成涉黄、侵权等危险概念的问题,实现了对特定概念的精确擦除。
概念半透膜模型通过一维 Adapter 和微调策略实现概念擦除,同时保留其他生成内容。Adapter 作为一种「半透薄膜」插入到预训练的 Diffusion Model(DM)中,学习特定概念的可迁移识别及擦除,同时保持模型完整性。通过微调策略 Latent Anchoring,模型获得对特定概念的擦除半渗透性,有效地擦除目标概念并保留其他概念。模型在推理过程中通过 Facilitated Transport 机制动态适配擦除信号,控制擦除效果,保证生成内容的准确性和完整性。
概念半透膜模型的实验效果表明,在单概念或多概念擦除时,模型能够稳定且彻底地擦除目标概念,同时对其他概念几乎没有影响。与其他方法相比,该模型具有更高的精确性和可控性,为 AI 作图模型的应用带来新的可能性。
这一研究成果有望在 AI 内生安全领域、可控生成等方面发挥重要作用,推动 AI 技术产品向着可用、可靠、可信、可控的方向发展。
SPM特色功能亮点总结如下:
概念消除功能 :使用一维适配器 Semi-Permeable Membrane(SPM),能够精确删除目标概念而保留非目标概念,实现通用、可定制和模型可转移的擦除解决方案。
代际交替侵蚀解决 **:通过引入 Latent Anchoring 策略,在微调过程中有效减轻了参数漂移,避免了概念的交替和侵蚀现象。
迁移能力 :SPM 能够在不重新调优的情况下,从一个专门的模型迁移到另一个,展现了其良好的擦除和保留能力。
艺术风格消除 :SPM 可以擦除特定的艺术风格而保留其他风格,避免了以往在擦除和保留之间的明显折衷。
明确内容消除 :在处理涉及裸露内容的情况下,SPM 能够有效消除明确内容,并展现了在不同情境下的擦除能力。
项目入口:https://top.aibase.com/tool/spm
论文网址:https://arxiv.org/abs/2312.16145
淘宝联盟开启「未来战略计划」:扶持100万个AI科技先锋淘客
在今日的阿里妈妈淘宝联盟双11合作伙伴大会上,淘天集团阿里妈妈淘宝联盟总经理承渊表示,淘宝联盟未来三年将重磅开启「未来战略计划」,计划3年扶持100万个深度运用AI的科技先锋淘客、10万个服务10万消费者的用户先锋淘客、100个货品分发规模破亿的生态先锋服务商。站长网2023-10-12 17:42:370000AI内容创作社区Civitai获Andreessen Horowitz领投510万美元融资
近日,总部位于美国的风险投资公司AndreessenHorowitz宣布领投了AI内容创作社区Civitai510万美元的种子轮融资。Civitai由贾斯汀·迈尔创立,是一个AI生成内容的分享平台。用户可以在平台上分享自己训练的AI图像生成模型,以及使用这些模型输出的作品。站长网2023-11-15 18:06:420003生数科技完成数亿元 Pre-A 轮融资 加速布局多模态大模型
生数科技完成数亿元Pre-A轮融资,该轮融资由北京市人工智能产业投资基金、百度联合领投,中关村科学城公司等跟投,启明创投等数位老股东继续支持。此前,生数科技已经获得来自蚂蚁集团、BV百度风投、卓源亚洲、锦秋基金、达泰资本、智谱AI等机构的投资。本轮融资完成后,生数科技将坚持其原生通用多模态技术路线,持续迭代优化自研大模型,并加速产品开发与市场拓展。站长网2024-06-05 16:36:300000Redmi微信公众号改名为REDMI红米手机:K80系列下周预热
快科技11月15日消息,今天下午,Redmi红米手机微信公众号更名为REDMI红米手机,Redmi字幕变成了全大写设计。据爆料,Redmi将在下周正式预热K80系列,该系列包含K80和K80Pro两款机型。其中RedmiPro搭载高通骁龙8至尊版处理器,是Redmi最强悍的高端旗舰,这颗芯片基于台积电第二代3nm工艺(N3E)打造,首次采用双超大核(26)方案。0000全球大火的Sora还没盈利 这些人已经实现日赚200万
Sora还未正式开放,卖课的已经盈利了。龙年春节期间,OpenAI发布了首款文生视频模型——Sora,仅需要文本即可自动生成一段长达60秒的高保真视频,这给业界带来不小的震撼,连马斯克都感叹“人类愿赌服输”,360创始人周鸿祎更是预言“AGI实现将从10年缩短到1年。”面对AI带来的机会,一些嗅觉灵敏的人开始着急赚钱。站长网2024-02-21 13:58:160000