FaceChain - 阿里推出的人物写真和个人形象生成框架
发布于 2024-01-16 · FaceChain是阿里巴巴达摩院推出的一个开源的人物写真和个人数字形象的AI生成框架(类似于免费开源版的妙鸭相机),用户仅需要提供最少一张照片即可生成独属于自己的个人形象数字替身。该AI框架利用了Stable Diffusion模型的文生图功能并结合人像风格化LoRA模型训练及人脸相关感知理解模型,将输入的图片进行训练后推理输出生成为个人写真图像。
FaceChain是阿里巴巴达摩院开源的人物写真和个人数字形象生成框架,约等于免费开源版的妙鸭相机。最少传一张照片,就能生成一个属于自己的数字替身。它的底子是Stable Diffusion的文生图能力,再配上人像风格化的LoRA训练和人脸感知理解模型:拿你输入的照片先训练,再推理,最后输出个人写真。
FaceChain的功能特色
- 形象定制化训练:至少传一张个人头肩照就能做LoRA风格化训练,出来的数字形象带自己的风格。
- 生成各种风格的个人写真:汉服、工作照、芭比娃娃、校服、圣诞、绅士、漫画,各种风格的个人写真FaceChain都能出,想换哪款换哪款。
- 支持SD WebUI插件调用:还能通过SD WebUI插件调用,在SD界面里跟AI模型交互,生成和编辑个人形象不用来回换工具。
- 支持姿态控制:数字形象的姿态可以由用户控制,让它摆动态姿势或特定动作都可以。
- 自定义prompt提示词:用提示词就能改数字形象的服装、配饰这些细节,按自己喜好来调。
FaceChain的官网入口
- FaceChain的GitHub代码库:https://github.com/modelscope/facechain
- FaceChain的研究论文:https://arxiv.org/abs/2308.14256
- FaceChain的ModelScope魔搭地址:https://www.modelscope.cn/brand/view/FaceChain
- FaceChain的Hugging Face地址:https://huggingface.co/spaces/modelscope/FaceChain
如何使用FaceChain
:FaceChain有三种用法:在Gradio界面里做训练和推理、资深开发者直接跑Python脚本、在SD WebUI装插件。本文以ModelScope魔搭社区在线运行的Gradio版为例来体验:
- 访问FaceChain的ModelScope demo 页面,在「人物形象训练」标签页下选1-10张自己的人脸/头像照片上传,照片里别出现多人脸,也别挡脸
- 上传后点「开始训练」启动形象定制化训练,每张图片大概要1分半
- 训练完成后切到右侧的「形象写真」标签,把参数调好,就能生成你的风格照片
- 另外还有个省事的入口,直接打开FaceChain Agent版本,不用走这些步骤,聊几句就能拿到各类写真照片,反而更推荐这么用






0 条评论
暂无评论,来抢沙发。