最近在刷短视频的时候，偶尔能看到一些真人转动漫风的作品，看起来给人一种新鲜感，流量都还不错，简简单单跳个舞，就能获得上千个点赞
~

那么，这种视频是怎么制作的？

本期给大家介绍一款
AI
转绘工具
Diffutoon
，可以将逼真的视频转换成动画风格，不仅能够处理高分辨率和快速运动的视频，还能确保整个视频的风格保持一致

Diffutoon
最新中文版：

百度网盘：
https://pan.baidu.com/s/1gKpZMMRpiB6OiTPc4cjNHA?pwd=tbjs

工作原理

Diffutoon
的核心是基于深度学习的图像转换模型，这些模型经过大量的动漫图像和视频数据训练，能够识别并模仿动漫风格的特征，包括颜色、线条、阴影和纹理等

1.
对输入的视频进行帧提取，将视频分解成单帧图像

2.
使用训练好的深度学习模型对每一帧图像进行风格转换，使图像呈现出动漫的视觉效果

3.
对转换后的图像合成处理，通过插帧技术提高视频的流畅度

4.
将处理好的帧图像重新合成视频，生成最终的动漫风格效果

功能特点

· 高度自动化：能够自动处理视频文件，无需人工干预，极大提高了视频动漫化的效率

· 结构引导：使用
ControlNet
模型提取视频中的关键轮廓信息，在动画过程中保留原内容的核心特征

· 一致性增强：集成
AnimateDiff
运动模块，增强帧时间一致性，确保动漫视频播放流畅，视觉连贯

· 自动着色：能够根据视频内容和风格要求自动选择合适的颜色进行填充

· 超分辨率：采用专门的控制网络进行视频的上色处理，即使输入低分辨率的视频，也能够生成高质量的动漫风格视频

使用方法

1.
在“稳定扩散”处选择模型“
aingdiffusion_v12.SafeTensors
”

2.
在“动画差异”处选择模型“
mm_sd_v15_v2.ckpt
”

3.
在“输入视频文件”处复制待处理视频所在的路径，例如
C:\dongman\1.mp4

4.
设置输入视频的高度和宽度，短视频的高宽一般是
1024
和
768

5.
设置开始帧
0
，结束帧设为视频的秒数乘以
30
，例如
10
秒视频的结束帧就是
300

6.
“输出视频文件路径”
保持默认值
output
，设置帧数为
30

7.
在“
ControlNet
单元”处设置

单元
0
：控制网为“
control_v11f1e_sd15_tile.pth
”，处理器为“
tile
”

单元
1
：控制网为“
control_v11p_sd15_lineart.pth
”，处理器为“
lineart
”

8.
点击
运行按钮

稍微等待一段时间，转绘后的视频保存在项目路径的
output
文件夹下

注意事项

①项目安装路径不要包含中文

②推荐使用
GTX1070
以上显卡运行此项目

③使用过程中若不慎关闭软件后台，请重新打开，并刷新网页

标签: none

添加新评论