推荐开源项目:Mist —— 保护艺术作品的强大工具
项目介绍
Mist 是一款专为保护图像风格和内容而设计的强大图像预处理工具,旨在防止最先进的 AI-for-Art 应用模仿图像。通过在图像中添加水印,Mist 使其变得无法被 AI-for-Art 应用识别和模仿。尝试模仿这些经过 Mist 处理的图像的 AI-for-Art 应用将无法生成有效的输出,生成的图像将会混乱且无法作为艺术作品使用。
项目技术分析
Mist V2 版本在技术上进行了多项升级,包括:
- 增强了对 Lora 和 SDEdit 等 AI-for-Art 应用的防护能力:通过先进的算法,确保图像在被 AI 模仿时输出混乱。
- ** imperceptible noise(不可感知噪声)**:在不影响图像视觉质量的前提下,添加难以察觉的噪声。
- 高效处理:仅需 6GB GPU 内存,大多数情况下处理时间仅需 3-5 分钟,同时支持 CPU 处理。
- 抗去噪能力:即使经过去噪处理,Mist 添加的水印依然有效。
项目及技术应用场景
应用场景
- 艺术家保护原创作品:防止 AI 应用模仿和复制艺术家的独特风格。
- 摄影师版权保护:确保摄影作品不被未经授权的 AI 应用使用。
- 设计师创意保护:保护设计作品的原创性和独特性。
- 数字版权管理:为图像添加难以去除的水印,增强版权保护。
使用方式
- 免费版本本地部署:适用于拥有 NVIDIA GPU(大于 6GB VRAM)的 Windows 系统,可从 Google Drive 下载。
- Colab Notebook:适用于 MacOS 用户或没有合适 NVIDIA GPU 的用户,可通过 Colab Notebook 在 Google 提供的免费 GPU 资源上运行。
项目特点
- 强大的防护能力:有效防止 AI-for-Art 应用模仿图像。
- 高效处理速度:仅需少量 GPU 资源即可快速处理图像。
- 灵活的部署方式:支持本地和云端部署,满足不同用户需求。
- 开源且可扩展:欢迎开发者贡献代码,共同推动项目发展。
快速上手
对于终端用户(艺术家、摄影师、设计师等)
- 下载免费版本:从 Google Drive 下载并按照指南部署。
- 使用 Colab Notebook:访问 Colab Notebook 并按照提示操作。
对于开发者
-
环境配置:
git clone https://github.com/mist-project/mist-v2.git cd mist-v2 conda create -n mist-v2 python=3.10 conda activate mist-v2 pip install -r requirements.txt
-
运行 Mist V2:
-
GPU 版本:
accelerate launch attacks/mist.py --cuda --low_vram_mode --instance_data_dir $INSTANCE_DIR --output_dir $OUTPUT_DIR --class_data_dir $CLASS_DATA_DIR --instance_prompt $PROMPT --class_prompt $CLASS_PROMPT --mixed_precision bf16
-
CPU 版本:
accelerate launch attacks/mist.py --instance_data_dir $INSTANCE_DIR --output_dir $OUTPUT_DIR --class_data_dir $CLASS_DATA_DIR --instance_prompt $PROMPT --class_prompt $CLASS_PROMPT --mixed_precision bf16
-
-
评估效果:
-
训练 LoRA:
accelerate launch eval/train_dreambooth_lora_15.py --instance_data_dir=$LORA_INPUT_DIR --output_dir=$LORA_OUTPUT_DIR --class_data_dir=$LORA_CLASS_DIR --instance_prompt $LORA_PROMPT --class_prompt $LORA_CLASS_PROMPT --resolution=512 --train_batch_size=1 --learning_rate=1e-4 --scale_lr --max_train_steps=2000
-
采样图像:
from lora_diffusion import tune_lora_scale, patch_pipe torch.manual_seed(time.time()) # The directory of LoRA LORA_OUTPUT_DIR = [The value of $LORA_OUTPUT_DIR] ...
-
贡献与联系
Mist 是一个开源项目,欢迎各方贡献。如果您对新一代 AIGC 的伦理、版权和可信性问题有独到见解,欢迎通过邮箱 mist202304@gmail.com 联系我们。
方法论一瞥
Mist V2 通过对抗性攻击生成扩散模型来实现保护效果。其核心优化目标为:
$$ \underset{x'}{min} \mathbb{E} {(z_0', \epsilon,t)} \Vert \epsilon_\theta(z'_t(z'_0,\epsilon),t)-z_0^T\Vert^2_2, \Vert x'-x\Vert\leq\zeta$$
(点击展开查看详细符号解释)
Mist 项目以其强大的防护能力、高效的处理速度和灵活的部署方式,成为保护艺术作品免受 AI 模仿的理想选择。立即尝试 Mist,保护您的创意和版权!
创作声明:本文部分内容由AI辅助生成(AIGC),仅供参考