Verzweifelter Versuch Anime BluRays zu retten

Win8Error · June 10, 2020 at 12:26 AM

Hallo alle zusammen!

Ich bin gerade frisch beigetreten und würde mich freuen wenn sich ein paar unter euch meinem Problem annehmen.

Ich versuche seit Tagen die betroffenen BluRays des Animes "Fairy Tail" zu deinterlacen aber ich bekomme einfach kein zufridenstellendes Ergebnis zu stande.

Mal wirkt alles ziemlich pixelig, mal hab ich eine Framerate von 119, mal wirkt alles zerhackt ...

Ich habe schon mit Handbrake, ffmpeg und Avisynth herum gebastelt. Bei letzterem bin ich allerdings noch komplett unerfahren (vor ein paar Tagen erst entdeckt). Ich weis langsam nicht mehr weiter.

Der Witz ist das nicht einmal alle Blu-Rays davon betroffen sind. Nur die Blu-Rays welche die Episoden 113 bis 174 beinhalten sind interlaced. Alle anderen Folgen sind progressiv bei 23,976 FPS.

Zudem wirken die betroffenen Folgen im Vergleich zu den vorherigen Folgen ziemlich unscharf (so als ob das Upscaling was bei den vorherigen Folgen geklappt hat, auf einmal fehlgeschlagen ist).

Ich lege euch MediaInfo Files von zwei Remuxen, Bilder und Samples bereit. Ich hoffe ihr könnt mir helfen.

https://drive.google.com/drive/folders/…qbIcb_nGujLwBYR (Dateien liegen hier)

Viele Grüße

Win

LigH · June 10, 2020 at 8:18 AM

Soweit ich das auf den ersten Blick beurteilen kann, ist das nicht "lineares Interlacing", sondern Telecine (3:2 Pulldown). Daher gleich die Frage: Welche Methoden hast du bisher versucht? War auch IVTC darunter? Bei Zeichentrick kann die automatische Erkennung des korrekten Musters schwierig sein, weil es da viele Szenen gibt, in denen Frames wiederholt werden, ohne dass eine Bewegung erkennbar ist, und dann passiert plötzlich ein deutlicher Sprung; aber die Szene in deinem "fehlerhaften" Clip, in der ein schöner langsamer Schwenk passiert, zeigt das 3:2-Muster klar und deutlich.

Win8Error · June 10, 2020 at 6:05 PM

Hey LigH

Also das Telecine hab ich versucht durch ffmpeg mit ffmpeg -i Fehlerhaft_Sample.mkv -vf pullup,dejudder,fps=24000/1001 -f yuv4mpegpipe - zu beheben.

Die Framerate war darauf hin bei 23,976 und die Bewegungen waren dann ebenfalls flüssig. Allerdings sah das Ergebnis noch lange nicht so aus wie bei den nicht betroffenen Folgen. Es wirkt im Vergleich zu den nicht betroffenen Folgen immer noch ziemlich unscharf und zwischen den schwarzen Konturen sind immer noch Linien zu erkennen.

Ich habe ein Sample vorbereitet und noch das MediaInfo dazu angehangen.

https://drive.google.com/drive/folders/…PkwT0ltsyGwNiIZ

Gruß Win

LigH · June 10, 2020 at 6:51 PM

Nun, wie gesagt: Es ist bei Zeichentrick nicht leicht, das Wiederherstellungsmuster vollautomatisch richtig zu erkennen. Kann gut sein, dass es für AvISynth da schlauere Plugins gibt, besser konfigurierbare Plugins, oder dass man den Funktionen, die in ffmpeg eingebaut sind, etwas helfen muss ... da ist dann mein Wissen an seinem Ende. Mal schauen, wer sonst noch Ideen hat.

Win8Error · June 10, 2020 at 6:59 PM

LigH Verstehe

Aber dennoch danke dir das du dir die Files mal angeschaut hast.

Selur · June 10, 2020 at 7:50 PM

Code

-vf pullup,dejudder,fps=24000/100

wenn Avisynth oder Vapoursynth keine Alternative sind vielleicht eher:

Code

mencoder  -lavdopts threads=8 -really-quiet -of rawvideo -o - -ovc raw -noskip -field-dominance -1 -vf scale,format=i420,filmdint,scale,format=i420  -sws 10 -forcedsubsonly -nosub -nosound -mc 0 "Fehlerhaft_Sample.mkv"  |  ffmpeg -loglevel fatal -noautorotate -nostdin -threads 8 -an -sn -r 24000/1001 -s 1920x1080 -f rawvideo -i - -r 24000/1001 -f yuv4mpegpipe - | ...

würde aber generell zu Vapoursynth oder Avisynth raten, da gibt es besseres IVTC, antialiasing usw.

Win8Error · June 11, 2020 at 12:51 AM

Hallo Selur!

Ich habe es mal 1:1 mit deiner mencoder Befehlszeile (unter Arch Linux) versucht aber leider ebenfalls kein Glück.

Die Framerate war zwar ebenfalls 23,976 und die Bewegungen waren super flüssig aber auch hier sind die Streifen zwischen den Konturen nicht verschwunden.

Ich habe mal zwei Screenshots angehangen.

Display Spoiler

https://abload.de/img/1p7k03.png

https://abload.de/img/2wok5g.png

Ich habe mich natürlich auch mal etwas in Avisynth eingearbeitet und mit QTGMC versucht was zu retten aber auch hier ohne Erfolg (siehe Samples).

Hättest du denn einen konkreten Vorschlag was ich mal in das Avisynth Skript schreiben sollte?

Edit: Was Avisynth angeht bin ich noch ein totaler Neuling. Ich wäre also um jede Hilfe dankbar.

Gruß Win

Selur · June 11, 2020 at 7:59 AM

In Avisynth/Vapoursynth würde ich:

1. das Material mit QTGMC Bob deinterlacen

2. das Material mit sRestore auf die gewünschte Framerate bringen

3. einen Anti-Aliasing-Filter anwenden:

Hier mal ein Beispiel

Code

LoadPlugin("I:\Hybrid\32bit\AVISYN~1\LoadDll.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\DGDecodeNV.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\AddGrainC.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\dfttest.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\EEDI2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\eedi3.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\FFT3DFilter.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\masktools2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\mvtools2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\TDeint.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\RgTools.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\MedianBlur2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\nnedi3.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\nnedi2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\TIVTC.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\Average.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\GRunT.dll")
LoadCPlugin("I:\Hybrid\32bit\AVISYN~1\yadif.dll")
LoadDLL("I:\Hybrid\32bit\avisynthPlugins\libfftw3f-3.dll")
Import("I:\Hybrid\32bit\avisynthPlugins\QTGMC.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\SMDegrain.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\AnimeIVTC.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\Zs_RF_Shared.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\Srestore.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\daa.avs")
SetFilterMTMode("DEFAULT_MT_MODE", MT_MULTI_INSTANCE)
# loading source: C:\Users\Selur\Desktop\Fehlerhaft_Sample.mkv
# input color sampling YV12@8
# input luminance scale tv
DGSource(dgi="E:\Temp\mkv_4f18c6e5b2067fa25c43611d3aa8157f_853323747.dgi",fieldop=2)
# current resolution: 1920x1080
# deinterlacing
AssumeTFF()
QTGMC(Preset="Fast", ediThreads=2)
# removing ghosting
srestore(frate=23.976,omode=6)
# filtering
# anti-aliasing
daa()
# adjusting bit depth current 8 to target 10
# convert to 10bit for encoder
ConvertBits(10)
return last

Display More

(an dem Anti-Aliasing würde man dann nochmal schrauben)

In FFmpeg könnte man eventuell etwas ähnliches Basteln, also bob deinterlacen, dann frames verwerfen.

Cu Selur

LigH · June 11, 2020 at 8:01 AM

Sehr empfehlenswert ist das TIVTC-Paket, aktuell von pinterf (das wird gerade zusammen mit TDeint für AviSynth+ noch ordentlich aktualisiert, auch als 64-bit-Version).

Allgemein sollte ein Skript etwa so aussehen:

Code

LoadPlugin("TIVTC.dll")
# eine Videoquelle, möglichst FFVideoSource oder LwLibavVideoSource
TFM()
TDecimate()

Allerdings haben die Funktionen auch noch mögliche Parameter, die gerade bei Zeichentrick die automatische Telecine-Muster-Erkennung unterstützen oder gar die manuelle Vorgabe von Startwerten erlauben.

Selur: QTGMC ist doch nur für lineares Interlacing geeignet, nicht für Telecine... oder willst du damit Artefakte aus einem falsch erkannten Pulldown-Muster kaschieren? Besser wäre wohl, erst mal zu schauen, dass das 3:2-Muster wirklich korrekt zum Material passt, also aus den 5 möglichen Startwerten der richtige verwendet wird.

Selur · June 11, 2020 at 8:18 AM

LigH: bei normalem IVTC wie Du es vorschlägst sehe ich da noch hässlichen Unterbrechungen der Linien,... wie bekommst Du die den Weg?

LigH · June 11, 2020 at 8:22 AM

Ich habe es selbst noch nicht getestet, weil ich nicht weiß, welche Parameter für die Mustererkennung bei Zeichentrick optimal sind. Bisher gehe ich noch davon aus, dass ein falscher Pulldown-Muster-Offset die Ursache sein könnte.

Selur · June 11, 2020 at 9:05 AM

Ne, glaub ich nicht, sieht für mich eher aus, als ob da irgendwann mal falsch interlaced resized wurde,... eventuell sollte man IVTC und downsizen und wieder upsizen,...

Mit Vapoursynth:

Code

# Imports
import os
import sys
import vapoursynth as vs
core = vs.get_core()
# Import scripts folder
scriptPath = 'I:/Hybrid/64bit/vsscripts'
sys.path.append(os.path.abspath(scriptPath))
# Loading Plugins
core.std.LoadPlugin(path="I:/Hybrid/64bit/vsfilters/ResizeFilter/nnedi3/vsznedi3.dll")
core.std.LoadPlugin(path="I:/Hybrid/64bit/vsfilters/Support/fmtconv.dll")
core.std.LoadPlugin(path="I:/Hybrid/64bit/vsfilters/SourceFilter/LSmashSource/vslsmashsource.dll")
core.std.LoadPlugin(path="I:/Hybrid/64bit/vsfilters/ResizeFilter/Anime4KCPP/Anime4KCPP_VapourSynth.dll")
# Import scripts
import havsfunc
import mvsfunc
import hysteria
# input color space: YUV420P8, bit depth: 8
# Loading C:\Users\Selur\Desktop\Fehlerhaft_Sample.mkv using LWLibavSource
clip = core.lsmas.LWLibavSource(source="C:/Users/Selur/Desktop/Fehlerhaft_Sample.mkv", format="YUV420P8", cache=0, prefer_hw=1)
# making sure input color matrix is set as 709
clip = core.resize.Point(clip, matrix_in_s="709",range_s="limited")
# making sure frame rate is set to 59.875
clip = core.std.AssumeFPS(clip, fpsnum=479, fpsden=8)
# Setting color range to TV (limited) range.
clip = core.std.SetFrameProp(clip=clip, prop="_ColorRange", intval=1)
clip = core.vivtc.VFM(clip=clip, order=0, mode=1)
clip = core.vivtc.VDecimate(clip=clip)
clip = core.fmtc.resample(clip=clip, kernel="lanczos", w=960, h=540, interlaced=False, interlacedd=False)
# adjusting color samplign for Anime4KCPP
clip = core.resize.Bicubic(clip=clip, format=vs.YUV444P8, range_s="limited")
# resizing using Anime4KCPP
clip = core.anime4kcpp.Anime4KCPP(src=clip, strengthColor=0.50, zoomFactor=1, ACNet=1, GPUMode=1)
 # line darkening using Hysteria
clip = hysteria.Hysteria(clip=clip)
# Anti Aliasing using DAA
clip = havsfunc.daa(c=clip, nns=1)
# adjusting output color from: YUV444P8 to YUV420P10 for x265Model (i420)
clip = core.resize.Bicubic(clip=clip, format=vs.YUV420P10, range_s="limited")
# Output
clip.set_output()

Display More

Selur · June 11, 2020 at 11:21 AM

Nope, ist auch noch nicht richtig in anderen Szenen gibts wieder combing,..

Selur · June 11, 2020 at 1:35 PM

Hier was mir aktuell gefällt: (kurz, wenige Filter, gutes Ergebnis)

Code

# Imports
import os
import sys
import vapoursynth as vs
core = vs.get_core()
# Import scripts folder
scriptPath = 'I:/Hybrid/64bit/vsscripts'
sys.path.append(os.path.abspath(scriptPath))
# Loading Plugins
core.std.LoadPlugin(path="I:/Hybrid/64bit/vsfilters/DenoiseFilter/CTMF/CTMF.dll")
core.std.LoadPlugin(path="I:/Hybrid/64bit/vsfilters/ResizeFilter/nnedi3/NNEDI3CL.dll")
core.std.LoadPlugin(path="I:/Hybrid/64bit/vsfilters/Support/libmvtools.dll")
core.std.LoadPlugin(path="I:/Hybrid/64bit/vsfilters/SourceFilter/LSmashSource/vslsmashsource.dll")
# Import scripts
import havsfunc
import mvsfunc
import lostfunc
# input color space: YUV420P8, bit depth: 8, resolution: 1920x1080
# Loading C:\Users\Selur\Desktop\Fehlerhaft_Sample.mkv using LWLibavSource
clip = core.lsmas.LWLibavSource(source="C:/Users/Selur/Desktop/Fehlerhaft_Sample.mkv", format="YUV420P8", cache=0, prefer_hw=1)
# making sure input color matrix is set as 709
clip = core.resize.Point(clip, matrix_in_s="709",range_s="limited")
# making sure frame rate is set to 29.970
clip = core.std.AssumeFPS(clip, fpsnum=30000, fpsden=1001)
# Setting color range to TV (limited) range.
clip = core.std.SetFrameProp(clip=clip, prop="_ColorRange", intval=1)
clip = core.vivtc.VFM(clip=clip, order=0, mode=2, cthresh=2, y0=64, y1=64, micmatch=2, micout=True)
clip = core.vivtc.VDecimate(clip=clip)
clip = lostfunc.DeSpot(o=clip)
clip = lostfunc.DeSpot(o=clip)
# cropping the video to 1912x1080
clip = core.std.CropRel(clip=clip, left=4, right=4, top=0, bottom=0)
# Anti Aliasing using DAA
clip = havsfunc.daa(c=clip, nns=1, opencl=True)
# deringing using HQDeringmod
clip = havsfunc.HQDeringmod(clip, incedge=True, nrmode=2, darkthr=3.0)
# adjusting output color from: YUV420P8 to YUV420P10 for x265Model (i420)
clip = core.resize.Bicubic(clip=clip, format=vs.YUV420P10, range_s="limited")
# Output
clip.set_output()

Display More

Für kleine Glitches -> DeSpot, HQDeringmod

Für die Combing-Reste -> DAA

Hier mal ein Reencode.

Vor allem kleine Rückstände vom IVTC haben sehr genervt, gehen mit DeSpot aber ganz gut weg, auch wenn das das Skript enorm bremst.

Cu Selur

Win8Error · June 11, 2020 at 4:17 PM

Hey Selur, hey LigH!

Wow! Euch zwei echt Danke für eure Mühe!

Selur, ich hab mir deinen ReEncode mal angeschaut und Wow! Sieht echt mehr als nur deutlich besser aus als das Original und meine Versuche!

Dein letztes Skript ist ja jetzt ein VapourSynth Skript oder?

Gruß Win

Selur · June 11, 2020 at 9:18 PM

Ja, ist ein Vapoursynth script.

Sollte aber auch mit Avisynth gehen, mit FFmpeg alleine sehe ich da keine Chance.

Cu Selur

Win8Error · June 11, 2020 at 10:29 PM

Oki.

Ich werde es morgen gleich ausprobieren und dir bescheid geben!

Danke nochmal & Gruß Win

LigH · June 12, 2020 at 12:05 AM

Hinweis:

AviSynth verarbeitet keine VapourSynth-Skripte. Die müssen inhaltlich etwas anders aufgebaut sein.

Selur · June 12, 2020 at 9:21 AM

In Avisynth sieht das Ganze so aus:

Code

LoadPlugin("I:\Hybrid\32bit\AVISYN~1\LoadDll.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\LSMASHSource.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\TIVTC.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\AddGrainC.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\dfttest.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\EEDI2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\eedi3.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\FFT3DFilter.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\masktools2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\mvtools2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\TDeint.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\RgTools.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\nnedi3.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\despot.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\dither.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\SmoothAdjust.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\MedianBlur2.dll")
LoadPlugin("I:\Hybrid\32bit\AVISYN~1\SangNom2.dll")
LoadCPlugin("I:\Hybrid\32bit\AVISYN~1\yadif.dll")
LoadDLL("I:\Hybrid\32bit\avisynthPlugins\libfftw3f-3.dll")
Import("I:\Hybrid\32bit\avisynthPlugins\QTGMC.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\SMDegrain.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\Zs_RF_Shared.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\dither.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\HQDeringmod.avsi")
Import("I:\Hybrid\32bit\avisynthPlugins\EdgeSmoothFast.avs")
#SetFilterMTMode("DEFAULT_MT_MODE", MT_MULTI_INSTANCE)
# loading source: C:\Users\Selur\Desktop\Fehlerhaft_Sample.mkv
# input color sampling YV12@8
# input luminance scale tv
LWLibavVideoSource("C:\Users\Selur\Desktop\FEHLER~1.MKV",cache=false,format="YUV420P8", prefer_hw=1)
# current resolution: 1920x1080
# deinterlacing
A2 = last
A2 = A2.QTGMC(Preset="fast", ediThreads=2, FPSDivisor=2)
TFM(mode=7,mChroma=true,clip2 = A2)
TDecimate(cycleR=1,cycle=5)
AssumeFrameBased()
# cropping
Crop(4,0,-4,0)# 1912x1080
# filtering
# despotting using DeSpot
DeSpot()
DeSpot()
# deringing using HQDering
HQDeringmod(U=3,V=3)
# anti-aliasing
EdgeSmoothFast()
# adjusting bit depth current 8 to target 10
# convert to 10bit for encoder
ConvertBits(10)
#PreFetch(8)
return last

Display More

Anmerkungen:

1. Habe nicht daa sondern EdgeSmoothFast verwendet, da daa in Avisynth nicht so gut ist.

2. Habe den Multithreading support deaktiviert (SetFilterMTMode + Prefetch) da ich hier nur 32bit Avisynth benutzte und 2xDeSpot sonst zu viel Speicher frisst bei 8 threads.

Cu Selur

Ps.: Würde eher Vapoursynth oder zumindest 64bit Avisynth+ empfehlen bei HD und höheren Auflösungen.

Win8Error · June 14, 2020 at 1:12 AM

Hey Selur

So, habe nun deine Vapoursynth Lösung probiert und mehr als "funktioniert einwandfrei" kann ich nicht sagen.

Ich habe das Vapoursynth-Skript mit dem "Hybrid"-Tool nachgestellt was du verlinkst. Nur das lostfunc "Teil" musste ich selbst noch herunterladen.

Finde das Hybrid-Tool im übrigen klasse!

Gibt's bei euch im Board eigentlich eine Einleitung für Einsteiger? Also wo mal so grob erklärt wird was die einzelnen Filter, usw. alles machen. Würde gerne mehr darüber lernen.

Nochmal vielen vielen Dank & Gruß Win

Verzweifelter Versuch Anime BluRays zu retten

Participate now!

Tags