全平台GPU通用AI视频补帧超分教程

本教程只发布于https://www.cnblogs.com/Icys

注意：本教程需要一定的命令行和视频编码知识，请谨慎食用。

软件准备

这些文件UP主将打包好放到群里，大家也可以自己去下载

文件准备

首先把下载的这些文件无脑丢一起

最好放在一个剩余空间比较大的地方，否则到时候缓存文件会把你磁盘撑爆掉。

在这个文件夹下面建立一个名为workspace的文件夹。

在workspace中，把你想要处理的视频文件命名为source.mp4 (按照你原来文件夹灵活改后缀，当然之后的命令里的后缀也需要对应修改，总之后缀和视频编码要适应)。

在workspace下同时建in,out两个文件夹。

开始运行

新建一个文本文档

打开，修改内容为

start cmd

保存后，重命名为run.bat

双击打开

拆分视频帧

在弹出的窗口里输入

..\ffmpeg -i source.mp4 .\in\%08d.png -c:v vulkan

这里用到了vulkan作为加速器，如果无法运行可以把-c:v vulkan删除（后文不在赘述）

耐心等待拆分完毕

分离音频

输入

..\ffmpeg -i source.mp4 -acodec copy -vn source.aac -c:v vulkan

这里通常是.aac格式，如果不行就换成.mp3格式

耐心掉电分离完毕

运行补帧(可选)

这个步骤可以执行0到无数次，直到满足你的需求，也可以和下面步骤调换顺序执行，下文同理

输入

..\rife-ncnn-vulkan -i .\in -o .\out

耐心等待补帧完毕

如果您是多显卡用户，并且程序无法准确调用到您想要的GPU，可以使用这个命令，下文同理

..\rife-ncnn-vulkan -i .\in -o .\out -g GPU编号

这里的GPU编号从0开始，您可以一个一个测试，直到调用到您的GPU。或者您可以用逗号(，)分割GPU编号，以达到调用多个GPU的目的。

如

..\rife-ncnn-vulkan -i .\in -o .\out -g 0,1,2

补帧完毕后再输入

rd /s /q in

rename out in

md out

运行超分(可选)

对于超分您有许多选项可以选择

命令模板

..\realcugan-ncnn-vulkan -i .\in -o .\out -noise-level 降噪等级 -scale 放缩倍率

这里的降噪等级可选值为(-1/0/1/2/3)，数字越大表示降噪越强，-1代表不进行降噪处理

这里的放缩倍率可选择为(2/3/4)，输入多少就代表把原来分辨率放大多少倍（宽高的倍率，像素是其平方倍）

支持降噪与缩放模式

缩放	降噪
2	-1/0/1/2/3
3	-1/3
4	-1/3

命令例子

将分辨率放大为原来4倍，并且打开一级降噪

..\realcugan-ncnn-vulkan -i .\in -o .\out -noise-level 1 -scale 4

当然，如果您是个佛系的人，也可以选择不进行配置，采用默认配置（降噪-1，放缩2）

..\realcugan-ncnn-vulkan -i .\in -o .\out

rd /s /q in

rename out in

md out

合并为视频

输入命令

..\ffmpeg -i source.mp4

找到** fps这样的字样

..\ffmpeg -f image2 -framerate 新的帧率 -i .\in\%08d.png -i source.aac -c:v 编码器 -crf 18 out.mp4

这里新的频率取决于您补帧的次数，原来是30fps，补过一次就是60，两次就是120。

而编码器参照下面这张表（GPU编码需要更高的质量可以以通过-b选项来设置，推荐视频码率: 1080p大于6000kbps(-b 6000k); 4k大于20000kbps(-b 20m); 8k大于40000kbps -b 40m）

名称
hevc_amf	AMD显卡专用（效果最差）
hevc_nvenc	NVIDIA显卡专用（效果倒数第二）
hevc_qsv	INTEL显卡专用（效果第二）
libx265	CPU通用（最慢，但是效果最好）

例如我这里补过一次帧，而且我是AMD的GPU，那么我就应该输入

..\ffmpeg -f image2 -framerate 60 -i .\in\%08d.png -i source.aac -c:v hevc_amf -crf 18 -b 20m out.mp4

或者我追求质量

..\ffmpeg -f image2 -framerate 60 -i .\in\%08d.png -i source.aac -c:v libx265 -crf 18 out.mp4

转码结束之后就可以了，workspace下的out.mp4就是转好的文件了。

清理

rd /s /q in

rd /s /q out

del source.aac