Lama Cleaner 是一个免费、开源、可以完全部署在自有硬件(CPU&GPU&M1/M2)上的 AI Inpainting(图像修复) 工具,集成很多开箱即用的 SOTA AI 模型。可以用它来完成很多图像修复任务,比如移除照片里不需要的路人甲、修复老照片上的磨损、去除图片水印、文本等。除了这些传统的 Inpainting 任务,Lama Cleaner 还集成了 Stable Diffusion 的 Inpainting 模型,利用 Stable Diffusion 以文生图的能力,根据文本描述「移除并替换」图片中的内容,比如下面视频中最后演示的:把狗替换成🦊。

Youtube 演示视频:

https://www.youtube.com/watch?v=BDV8uFVa1oI&ab_channel=PanicByte

Untitled

Highlight 几个模型

LaMa

https://lama-cleaner-docs.vercel.app/models/lama

个人用的最多的模型,也是这个项目集成的第一个模型

Stable Diffusion

https://lama-cleaner-docs.vercel.app/models/stable_diffusion

根据文本描述,擦除并替换图片内容。为了最好的效果,文本的描述不仅要包含想要生成的内容,还要包含对于图片的总体描述,例如演示视频中用了 a fox sitting on a bench。

https://youtu.be/VrV1Cixvc2Q

Paint By Example