专注4K家庭影音, 服务千万家庭影音发烧友!

[交流分享] Anime4K:目前最热的开源实时动漫放大算法,Github上一周收获2600星!!

给爷爬 发表于 2019-8-27 04:42:18 | 显示全部楼层
今天跟大家介绍一款动漫画面放大算法Anime4K,目前最热的开源、实时、视频动漫放大算法
& ~& |( T+ q: ^% U$ g/ T+ p

; m# K/ ~. W. D+ w
https://github.com/bloc97/Anime4K
9 K5 x) F& F  G
一周内该库在Github上收获2600+星,作者12天前在reddit上推介了该项目,也成为了大家的热门话题,引起极大关注!
% M$ g; P/ I' f. P
为什么呢?
  b2 z* d; Z5 P8 t- F( S
) H5 b6 C8 \2 L, m; _) u0 Q
Anime4K完全没有使用深度学习、统计方法,而且速度非常快!
+ y, M+ m! n9 o
下图展示了使用Anime4K将动漫画面从1080p提升到2160p的效果:

1 q9 S7 q! g$ F; O, E( l1 C$ g
$ A7 p$ Q* N: J. i1 o2 ]) `5 U* k
(计算硬件Vega 64 GPU)时间仅需要3ms
6 N8 V& l' T8 Z% \( e' b; \
与其他具有相同功能的开源库比较图:
- }  L+ U& m7 `/ q+ B5 `$ n
Anime4K在画质效果最好的情况下,速度完全碾压!!
现有算法
作为一般规则,图像可以分解为两部分,其低频分量LR_U和高频残差r。
直观地,单图像超分辨率被定义为使用低频数据LR_U(模糊的低分辨率图像)恢复高频残差r。 常见的边缘细化算法,例如反锐化掩模[6]采用低分辨率图像,通过计算低分辨率图像与该图像的更低分辨率之间的差异来提取低分辨率图像的残差,然后它将这些残差变薄并锐化到最终将其添加到LR_U。此方法会产生现有锐化算法中常见的振铃和过冲。我们需要更好的东西,不会分散观众的注意力。
9 m$ A7 U) R$ L
基于学习的算法接受LR_U并尝试用神经网络,稀疏字典或在图像中寻找自相似性来预测残差r。不幸的是,基于学习的方法对于实时应用来说现在太慢了,但我们不能忽视它们的有效性。诸如waifu2x或VDSR等算法远远优于任何其他通用升级算法。
但是,我们将利用这样的事实:我们的升级算法只需要处理单一类型的内容(动画),因此我们可能有机会匹配(甚至超越)基于学习的算法。
8 V6 d- @' m2 X7 E% P9 F& I* K
开源地址:
https://github.com/bloc97/Anime4K
原理细节详见:( B" D: a. c4 s- W3 b+ k
https://github.com/bloc97/Anime4K/blob/master/Preprint.md#proposed-method
  l' N2 W9 Q0 _
有人看的话再更新potplayer使用方法吧
. R+ a$ V* E6 b2 j
! j+ q6 a/ @9 ]& g

评分

参与人数 1K币 +10 收起 理由
hao4k + 10

查看全部评分

回复

使用道具 举报

发烧友评论4

倒序浏览
大北北 发表于 2019-8-27 10:32:03 | 显示全部楼层
给爷爬 发表于 2019-8-27 10:10
; F2 T& @2 j2 r' d: l1 N  _3 I! i不会吧 我是能看到
6 i2 r' Y3 l6 S+ d! U  g2 Z3 F+ }6 {
刚才看不到,现在看到了
回复 支持 反对

使用道具 举报

给爷爬 发表于 2019-8-27 10:10:15 | 显示全部楼层
大北北 发表于 2019-8-27 09:49
) D! O3 \& D- W$ A9 D2 v# _' A只有我一个人看不到图片吗?楼主图片没有啦
4 f% ]9 P  F+ G) @
不会吧 我是能看到# @. g+ h0 b* k! U: R/ m& {
回复 支持 反对

使用道具 举报

 楼主| 大北北 发表于 2019-8-27 09:49:47 | 显示全部楼层
只有我一个人看不到图片吗?楼主图片没有啦
回复 支持 反对

使用道具 举报

michaellv 发表于 2019-8-27 09:13:38 | 显示全部楼层
电影帧率23.976,也就是说每帧=41.7ms,如果Anime4K的upscaling渲染速度真的只是3ms,那么就极有应用价值了,不过动画片毕竟是画面比较简单,要是能应用在真人电影上,那么对于老影迷必将是趋之若鹜,求贤若渴般的存在了。
* h) ]: @# W" j: F, j0 c& h8 ~" t+ x  ?6 E2 V
PS: madVR的NUG算法现在就已经算是鹤立鸡群了!不过话又说回来,如果4K视频真能彻底普及且制作精良,这样算法也没多大的用处。
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

在线客服

在线客服

服务时间 9:00—18:00

返回顶部

关注微信公众号第一时间推送精彩

官方微信

手机访问

Hao4K影音

专注4k家庭影音,提供家庭影音社区,家庭影音器材库,影音问答平台,影音商城,服务千万家庭影音用户。

本站内容部分由用户自主分享和转载自互联网,转载目的在于传递更多信息,并不代表本网赞同其观点和对其真实性负责。

如有侵权、违反国家法律政策行为,请联系我们,我们会第一时间及时清除和处理!

举报反馈邮箱:admin@hao4k.cn

Copyright  2019-2020  Hao4K影音粤公网安备 44030302001429号    ( 粤ICP备18155646号-1 )|网站地图