1.视频作用
B站视频作用:傍晚见证虔诚的信徒
2.预备工作
制造视频作用,需要预备下面3个条件:
- 预备stable diffusion的环境
- 编排一段【鸡你太美】原版视频
- stable diffusion装置sd-webui-IS-NET-pro插件
2.1布置stable diffusion环境
布置过程参阅制造ikun图片的文章:【奶奶看了都会】2分钟学会制造最近特火的ikun幻术图
这儿仍是建议我们用云渠道布置stable diffusion,简略高效。由于本地布置要踩的坑实在是太多了,小卷之前但是花了一天时间才布置好的。
另外最近揽睿星舟渠道有七夕节活动, 全场3090 24G资源【7.7折】优惠!!相当于只需1.46/时
活动时间截止到2023.8.22
注册地址:www.lanrui-ai.com/register?in…
2.2 stable diffusion装置sd-webui-IS-NET-pro插件
简略介绍下sd-webui-IS-NET-pro插件,主要的功用是将视频分红多帧图片,批量抠图操作,以及多帧图片转视频处理
插件地址:github.com/ClockZinc/s…
装置过程:
- SD页面 – extension – install from URL,输入下面的链接,点击install
https://github.com/ClockZinc/sd-webui-IS-NET-pro.git
- 插件装置isnet-general-use.pth模型文件
模型下载地址获取:大众号卷福同学
内发关键词AI绘画
获取
将模型文件放到下面的目录里,然后重启SD就完成装置了
/home/user/data/sd/extensions/sd-webui-IS-NET-pro/saved_models/IS-Net
3.视频制造流程
这儿列一下AI视频制造的整个过程:
- Isnet_Pro的video2frame把视频切分为多张图片
- Isnet_Pro的图片布景去除把人物布景去掉
- 文生图制造图片作用
- 选取作用好的图片seed值,批量生图
- Isnet_Pro的frame2vide把多帧图片转视频
- 编排东西给视频配音
3.1视频分红多帧
在SD页面切换到isnet_Pro插件上,选frame2video,然后上传你的视频,填上输出目录,可直接参阅我的目录。点击gene_frame
开端生成图片
/home/user/data/sd/outputs/frams
等候1分钟左右,生成的图片可在输出目录下找到:
3.2去除图片人物布景
切换到ISNETpro2,然后填入方才的输出目录到输入地址,图片的输出地址也填个新的,点击开端批量生成
/home/user/data/sd/outputs/Isnet_output
等候几分钟后,能够在输出地址检查生成的图片作用,能够看到人物的布景现已全换成白色了
mask目录里是黑底蒙版图,也是能够拿来用的
3.3文生图
正面词:
The sea, mountains, highways, forests
不和词:
NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome0),((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbic d:1.21),(mutilated:1.21),(tranny:1.331),mutated hands,(poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs,(disfigured:1.331),(missingarms:1.331),(extra legs:1.331),(fused fingers:1.61051),(toe omany fingers:1.61051),(uncleareyes:1.331),lowers, bad hands,missingfingers, extra digit,bad ha ands, missing fingers, ((extra arms and legs))),
controlnet装备如图,需要使用模型control_v1p_sd15_qrcode_monster
能够多跑几张看看作用,挑选作用好的图片的seed值
3.4 固定seed,批量生成图
写入自己看好的图片的seed值,然后填入上一步的图片输出途径,开端批量生图。图片生成放在/home/user/data/sd/outputs/txt2img-images
对应的日期目录下,可自行查找
图片生成方位:
3.5 多帧图片兼并视频
打开isnet_Pro的frame2video
功用,装备图片输入目录和视频数据目录,点击生成即可
视频生成完成后,找到视频文件,并从渠道上下载到本地
3.6 制造完好视频
合成的视频是没有声音的,这儿我们能够自行用编排东西游玩了,给视频加上配音,或是直接模版生成。
视频作用我们自行探索哦~
4.重视
用AI制造视频的教程就到这儿了,是不是很简略呢,视频作用依赖AI调教以及视频编排。假如喜爱这篇文章的话,给小卷点个重视吧~