关于Javplayer进阶用法TG-PLUS去除视频马赛克的简易教程

彧宇2

[j]YI2NG RG87I2[/j]
[j]YI2NG RG87IJ[/j]

基本介绍

Javplayer通过调用TecoGAN（一种SR超分辨率模型）模型来进行AI去码运算，然后再进行音视频合成www.otomedream.com#0? M, \, g5 u! t7 H。但是SR模型的去码效果有限，所以引进了SRA（附加超分辨率）模型www.otomedream.com#0?7 [: w) s b7 M( s7 }9 `  F# m，也就是basicVSR-ppwww.otomedream.com#0?, B, Q2 Z* M& S0 q p P、realesrganwww.otomedream.com#0?, ]5 S: \ \$ j、veai/tvai（一种视频无损放大修复软件）等技术www.otomedream.com#0?/ `7 \% u% M1 n# N0 X5 a3 z  G- g，以图达到更好的效果。而TG-PLUS则相当于TecoGAN的增强版，提供模型配置工具以及多种内置模型，并可以组合各种模型。缺点就是耗时相对来说会延长www.otomedream.com#0?/ \0 `$ ~% {6 L2 B，但效果还是很好的

现在的最新版本是2.01cwww.otomedream.com#0?9 l* ]0 ]) S) {，个人感觉2.01c的去码效果确实比1.12b稍微差一些，但是速度是要快上一些的。作者更新的最后那两个patcher文件www.otomedream.com#0?$ K x/ m g5 Z$ [4 F，713中v2里的文件复制到TG\TGMAIN里，715复制到TG-MODEL里。下面是这两个patcher文件的更新日志

[j]YI2NG RG87IE[/j]
2.01c的Javplayer需要JavPlayer_102正版的运行文件，第一次运行时拖入2.01c的运行框里：
[j]YI2NG RG87I5[/j]

[j]YI2NG RG87II[/j]

TG-PLUS的安装

我发的2.01c是有整合的，如果各位用的是之前大佬发的1.12b版本或者是无整合的2.01c版本www.otomedream.com#0?$ _9 L0 [# k9 T9 N! Q，可以挂个   ***下载/download/otomedream/ダウンロード***   去作者那儿下，这里先给个链接，后面我也会整个单独的TG-PLUS出来：

https://github.com/km2ii/JVP_TG-PLUS/blob/main/Changelogs.md

下载完之后www.otomedream.com#0?1 }$ f1 S2 C6 I+ i，解压覆盖到2.01c的目录中,若主目录中出现ConfigTools   ***下载/download/otomedream/ダウンロード***   则覆盖正确。

1.cuda和cudnn的安装

如果各位的电脑是N卡，则需要安装cuda和cudnn，调用N卡会更快www.otomedream.com#0?: h& J  S4 f/ x ?，否则都是CPU处理，速度会比较慢www.otomedream.com#0?( f  J) O9 ?+ w。安装的版本为cuda 11.8.0和cudnn-8.8.1.3。

这里提供NVIDIA的官方下载链接给各位：

cuda 11.8.0：https://developer.nvidia.com/cuda-11-8-0-download-archive

cudnn-8.8.1.3：https://developer.nvidia.com/rdp/cudnn-archive

具体安装（版本检测www.otomedream.com#0?( c( G* \* ?4 e7 `  `% e、文件覆盖、环境变量设置www.otomedream.com#0?% Z: o- v9 ?. o( J、检测安装是否成功）大家可以参考下面这篇博客来安装www.otomedream.com#0?& B1 G. ]# ^* r! F  p; s& ?，讲的还是比较详细的。

https://blog.csdn.net/u010618587/article/details/82940528

对于Javplayer是否可以调用N卡的检测www.otomedream.com#0?3 O, N; ` ?: M+ U$ O/ w，网上的说法是进入JavPlayer文件夹\TG\TGMAIN，通过打开命令指示符运行目录里的main   ***下载/download/otomedream/ダウンロード***   来检测www.otomedream.com#0?/ P; I [+ K C，但是我发现我的文件夹里并没有main   ***下载/download/otomedream/ダウンロード***   www.otomedream.com#0?; U) t8 O# R9 Y，所以可以尝试先进行一次短的视频破解处理，观察任务管理器里CPU和显卡的占用率。

如果cuda和cudnn都确认安装完成了www.otomedream.com#0?) T4 `0 d ~ o! I，但是Javplayer还是无法调用N卡www.otomedream.com#0?1 x A: B! X( }% F，可以尝试安装一下zlip 1.2.3www.otomedream.com#0?6 o8 ?7 h A, u* p! [，这里是下载链接：

https://gnuwin32.sourceforge.net/packages/zlib.htm

2.tvai的安装

veai是一种视频无损放大修复软件，现在Javplayer目前只能调用veai 2.3.0，而tvai可以视为veai的升级版www.otomedream.com#0?# L8 S; [ I7 R: C: b, l# Q$ H，模型更多且调用不会出现GUI界面且速度更快www.otomedream.com#0?: J& Z3 u- f$ F3 V，TG-PLUS可以调用tvai，这里推荐大家用tvai模型，我就不讲veai如何安装了www.otomedream.com#0?% c  j1 t. b7 p) [1 [% Y7 R，tvai下载链接在最后www.otomedream.com#0?1 s: ~$ z0 u3 }。

下载解压后www.otomedream.com#0?9 Q1 Y+ D- Q4 q+ M7 A! G，需要对TG-PLUS进行设置www.otomedream.com#0?4 P& s: \0 g# s8 w6 s。打开目录中的ConfigTools   ***下载/download/otomedream/ダウンロード***   www.otomedream.com#0?9 E6 w/ T+ g, ?4 B$ _: Z7 S+ I，点击tvai，更改路径到你解压的路径中:

然后还要设置环境变量：

TG-PLUS的使用

1.配置和调用方法

打开ConfigTools   ***下载/download/otomedream/ダウンロード***   ，在mplus页面进行配置，如下图：

右键可以加载和保存当前流程

其他设置可以自行根据情况修改，都在others设置中。

然后就是如何正确的调用TG-PLUS,在Javplayer页面中，SR选择tgmain，SRA选择NONE便可以调用TG-PLUS：

2.部分流程的作用

（1）降噪（denoise）功能

使用超分辨率模型www.otomedream.com#0?( C2 V+ L: g+ p7 J5 J9 t，图像被放大，同时引入噪声，导致闪烁www.otomedream.com#0?+ [, f9 d$ ]( Q* x6 P。去噪使图像更加清晰www.otomedream.com#0?% K& |7 X1 k ~) M5 f6 {，但是可能会产生失真www.otomedream.com#0?( Z8 D) j4 w3 t( s8 f，使图像看起来不自然www.otomedream.com#0?4 e( J$ f- x4 L3 W+ J# w。
这里提供了三个降噪插件www.otomedream.com#0?- @ u. j- k% G  u9 w% G& Z; H，根据噪音情况合理选择高、中、低强度。

一般默认就可以了www.otomedream.com#0?3 i2 c  p5 c, S7 ~7 c1 m; ?8 ^, } }，denoise一般放在超分辨率模型之后，对CPU占用率很高，谨慎使用。

（2）downscale功能

使用downscale功能可以减少二次增强状态的运行时间，避免显存不足的错误www.otomedream.com#0?9 [, \ n) R2 J; N  [ {& P。与二次增强模型一起，downscale具有增加图像真实感和抑制闪烁的效果。

（3）TG-PLUS BVPP 和官方 SR-BVPP 的区别

a.调用方式不同www.otomedream.com#0?, F2 @- C& D, K, _/ W- J* C。
[j]YI2NG RG87J4[/j]官方 sr-bvpp：启用 sr-bvpp并开始记录。

这里将执行mPlus处理任务，忽略JVP主界面中的模型设置，如下图所示。

[j]YI2NG RG87JG[/j]

[j]YI2NG RG87I1[/j]
[j]YI2NG RG87IA[/j]b.TG-Plus型号与官方型号的区别。
st型号是由官方型号转换而来，没有任何区别www.otomedream.com#0?9 }  M8 c# x% j2 A。
[j]YI2NG RG87J8[/j]

[j]YI2NG RG87IN[/j]
[j]YI2NG RG87JC[/j]以上就是TG-PLUS的安装以及使用方法
[j]YI2NG RG87IP[/j]

以下为设置流程的一些小建议

官方给出的基本流程设置如下：超分辨率（tecoganwww.otomedream.com#0?4 Y7 o0 p% u6 L: s! m0 }、tecogan-da、basicVSR-pp三选一）--降噪抑制闪烁和噪声--二次增强(提高图像分辨率)（如SE-4X）--选择是否再次降噪--TVAI或VEAI(以改善细节并消除噪音)--UE模型提高清晰度www.otomedream.com#0?5 g6 q; @4 o* A2 Y, _1 S0 e。

例1：4X模型
[j]YI2NG RG87HS[/j]基本流程:TG-DE-(SE-4X-S1)-(DE)-(TVAI/VEAI)-(UE-4X)

例2：.8X模型:
[j]YI2NG RG87IY[/j]8X模型的超分辨率效果非常明显，可以使用简化过程。
基本过程:8X(tecogan-da/basicVSR-pp)-(DE)(DS)-(TVAI/VEAI)-(UE-4X)

对于某些闪烁和异常噪声类型，基本过程为:TG-AF-DS-8X-DE(DS)-(TVAI/VEAI)-(UE-4X)

[j]YI2NG RG87JE[/j]

重用基本模型是否有意义?
[j]YI2NG RG87I5[/j]在4X阶段www.otomedream.com#0?$ F. M, t: g6 t7 a，重复使用同一模型没有意义www.otomedream.com#0?& U4 z* ^. q+ g C，也不会增强实际效果
[j]YI2NG RG87IQ[/j]在8X阶段www.otomedream.com#0?: ?3 o( |) R9 @，8X(DA)模型的复用可以在一定程度上改善图像效果www.otomedream.com#0?6 Y6 a4 e. h+ \7 s# I: T  H! A& J, a。

basicVSR-pp中st、at模型和4X、8X模型一起用很可能会导致卡死，建议不要重用

这些流程缺点是步骤太多www.otomedream.com#0?( b; x, d7 s1 [  _，耗时太长（模型复用时间成本翻倍）www.otomedream.com#0?2 l b# R) L* s0 c% t9 f, }, G! w- R，容易造成图像失真。我R7+3060的电脑破解5秒的视频都要一分多钟，可见耗时有多长www.otomedream.com#0?3 O/ w  T& N8 D8 I3 g。

经过不断测试，tecogan模型中TG-AF2对厚码的破解效果较好，但是图像清晰度一般www.otomedream.com#0?- D; n6 C& v# R- `，噪点较多www.otomedream.com#0?, A1 B# O% O#   ***下载/download/otomedream/ダウンロード***   N0 v。TG-STD对所有马赛克都有一定效果，但马赛克位置的图像有明显的撕裂涂抹感www.otomedream.com#0?$ e, ?/ W0 c2 }, q, b/ b  d，TG-Z415在清晰度上比STD更高；TG-8Xhd/TG-8XhdAF清晰度高，但会导致失真以及图像变形。SE-4X系列一般加在超分辨率模型后www.otomedream.com#0?( u* c9 c( O4 `9 A，对分辨率提高有一定效果，但是导致整体耗时长且没有UE-4X效果好，UE-4X一般加在流程最后www.otomedream.com#0?4 X; |% c/ c2 l+ Y. Q- i$ m( M，是比较有用的www.otomedream.com#0?( V5 J( @2 o1 d# w& h/ I，建议加上。

basicVSR-pp是最稳定且效果很好的破解模型方法，8x系列分辨率高，但是失真和变形可能会很严重，80000和165000效果也还不错，而85000我是很推荐使用的，对厚码闪烁码效果都还不错。

TVAI中的模型很多，这里给大家放个模型说明表，虽然是机翻，但是大概还是能看懂：

https://javpcn.com/forum.php?mod=attachment&aid=NjIyfDc3MDViMDVjfDE3MDYwOTI4NTd8MzQ4MXw0Nzk%3D

[j]YI2NG RG87IZ[/j]其中denoise可以根据硬件情况删除，m1也可以改成TG-STD\TG-Z415等4X模型
用这个流程   ***下载/download/otomedream/ダウンロード***   一部2小时左右的视频大概要6-10小时左右（根据马赛克帧的不同，这个时间有波动）www.otomedream.com#0?$ V7 _ Z/ K2 W7 K7 v. ?* y  D，而用官方给出的流程至少要20小时以上