Automatische blend detection? (Avisynth/Vapoursynth)

Selur · June 16, 2022 at 10:27 PM

Gibts für Avisynth oder Vapoursynth ein Skript oder einen Filter der automatisch blended fields erkennt?

66:

[Blocked Image: https://i.ibb.co/t3DrnBQ/field-66.png]

67:

[Blocked Image: https://i.ibb.co/WB08K8L/field-67.png]

76:

[Blocked Image: https://i.ibb.co/tMLh8dt/field-76.png]

77:

[Blocked Image: https://i.ibb.co/5rPXHT8/field-77.png]

wenn ich mir das Ganze file gebobbed anschaue sind

- von 0-1010 in einem Zykel von 10 Frames Frame 6 und 7 blends (= Schrott)

- von 1010-1110 in einem Zykel von 10 Frames Frame 2 und 3 blends (= Schrott)

- von 1120-1400 in einem Zykel von 10 Frames Frame 6 und 7 blends (= Schrott)
- von 1410-1420 in einem Zykel von 10 Frames Frame 2 und 3 blends (= Schrott)

- von 1430-1570 in einem Zykel von 10 Frames Frames 2, 3, 4 und 5 blends (= Schrott)

- bei 1580 in einem Zykel von 10 Frames Frame 6 und 7 blends (= Schrott)

- von 1590 bis zum Ende in einem Zykel von 10 Frames Frames 6, 7, 8, und 9 blends (= Schrott)

könnte da manuell fixen in dem ich die Quelle splitte und dann auf den Teilen je einen angepassten SelectEvery-Aufurf ausführe.

Da der Clip ein einfaches Cartoon ist, ist mir aber die Frage gekommen, ob es da nicht was automatisches gibt, was man vielleicht anpassen könnte.

Wenn man die blended Fields erkennen könnte, dann könnte man diese vielleicht einfach rauswerfen und dann mit sRestore auf die gewünschte Zielframerate oder mit RIFE oder dergleichen die Frames durch Interpolationen ersetzen.

Weiß da einer was?

Cu Selur

Ps.: mit Avisynths ExBlend kriegt man einige der Blends entfernt. Nice. (leider scheint es keine Vapoursynth Alternative zu geben. :()

LigH · June 17, 2022 at 11:07 AM

Mehr als auf die AviSynth-Wiki verweisen könnte ich nicht. Praktische Erfahrung habe ich keine. Möglich, dass man bei Zeichentrick etwas rücksichtsloser ersetzen kann und weniger gewichtet rechnen muss.

FatFaster · June 17, 2022 at 2:13 PM

könnte damit gehen https://forum.doom9.org/showthread.php?t=175948

http://avisynth.nl/index.php/ExBlend

Selur · June 18, 2022 at 9:09 AM

ExBlend krieg ich hier 2pass nicht ans laufen, hatte dort auch schon im thread gepostet.

FatFaster · June 18, 2022 at 12:28 PM

https://github.com/WolframRhodium…vsfunc.py#L5407

Cdeblend scheint eine Ausgabe für erkannte blends zu besitzen. Das anzupassen für rife sollte ja nicht zu schwer sein. Ich würde das per frameprops markieren und dann über ein einfaches rife script nur die blend frames bearbeiten => Stichwort Frameeval

Selur · June 18, 2022 at 1:25 PM

Hast Dir das mal angeschaut? Habe gerde mal bei einigen Frames mit blends omode=4 angetestet.

Zumindest bei den Quellen die ich hier habe, wird da nur seltenst was erkannt und dann meist eher nach oder vor einem blend wo nur noch kleine Überresete da sind,..

FatFaster · June 19, 2022 at 8:11 AM

Ja eben (war vorher am laptop). Das scheint wohl nicht ganz korrekt zu arbeiten...

FatFaster · June 19, 2022 at 8:36 AM

Es funktioniert doch, ABER du musst es aber Frame 0 abspielen. Sonst scheint es "verwirrt" zu sein.

EDIT

Und jetzt funktioniert es wieder nicht, wtf? Irgendwas ist da sehr komisch. Aber es hatte funktioniert! Habe auch die Avisynth Variante side by side gestellt. Waren quasi gleich und nun wieder nicht mehr. Sehr komisch....

Selur · June 19, 2022 at 5:38 PM

klappt bei mir nicht,.. CDeblend mit mode=4 gibt mir immer 0.0 aus,... Meine Quelle

FatFaster · June 21, 2022 at 4:28 PM

Ja irgendwas stimmt da nicht. Keine Ahnung ob es an VS selbst oder am Script liegt. Habe dazu ein bug report gemacht https://github.com/WolframRhodium/muvsfunc/issues/48

Ich weiß dass es 100% funktioniert hatte als es damals commited wurde auf github. https://github.com/WolframRhodium…omment-33593027

Und das komische ist, dass einmal kurz mit der aktuellen VS version funktionierte und dann plötzlich wieder nicht mehr...

Selur · June 21, 2022 at 7:54 PM

Mit ExBlend:

Code

ClearAutoloadDirs()
SetFilterMTMode("DEFAULT_MT_MODE", MT_MULTI_INSTANCE)
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\LoadDll.dll")
LoadDLL("I:\Hybrid\64bit\Avisynth\avisynthPlugins\libfftw3f-3.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\DGDecodeNV.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\manyPlus.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\FFT3DFilter.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\neo-f3kdb.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\masktools2.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\mvtools2.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\AutoAdjust.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\aWarpSharpMT.dll")
LoadPlugin("I:\Hybrid\64bit\Avisynth\AVISYN~1\RgTools.dll")
Import("I:\Hybrid\64bit\Avisynth\avisynthPlugins\mtmodes.avsi")
Import("I:\Hybrid\64bit\Avisynth\avisynthPlugins\Zs_RF_Shared.avsi")
Import("I:\Hybrid\64bit\Avisynth\avisynthPlugins\mClean.avs")
# loading source: E:\clips\Courage the Cowardly Dog S02E17E18 SOURCE.mkv
LoadPlugin("c:\Users\Selur\Desktop\ExBlend_x64.dll")
LoadPlugin("C:\Users\Selur\Desktop\RT_Stats_x64.dll")
Import("I:\Hybrid\64bit\Avisynth\avisynthPlugins\mClean.avs")
Import("I:\Hybrid\64bit\Avisynth\avisynthPlugins\mtmodes.avsi")
# loading source: E:\clips\Courage the Cowardly Dog S02E17E18 SOURCE.mkv
# color sampling YV12@8, matrix: bt709, scantyp: progressive, luminance scale: limited
DGSource(dgi="E:\Temp\mkv_ae71be80b1642ad5291d33db23176b8a_853323747.dgi",fieldop=2)
# current resolution: 720x480
# filtering


ORG=Last


TMP=ORG
TMP.Exblend(mode=1, ExBfile=".\Exbfile", debug=true, lv=5, dv=5)
#return last Return Pass 1


RT_ForceProcess()
TMP=0 # kill TMP clip and call ExBlend filter destructor


ORG


SHOW=0
Exblend(mode=2,ExBfile=".\Exbfile",Decimate=False,Disp=1,Show=SHOW) # Non decimated, Blend pair replaced with 2 x copies of ex-blended frame. Little colored block flags ex-Blended frame pair.
#Exblend(mode=2,ExBfile=".\Exbfile") # Deblended & Decimated
mClean(thSAD=800,rn=1)
# Both below lines for Non Decimated ONLY.
#StackHorizontal(ORG,Last)
#Subtract(ORG,Last)


Return last

Display More

gehts recht gut, siehe: https://forum.videohelp.com/threads/405837…ge2#post2660590 https://forum.selur.net/thread-2807-post-16312.html

Aber leider hat StainLess keine Pläne nen Vapoursynth Port zu erstellen.

Mit ExBlend + DPIR könnte man Animes&Cartoons sons vermutlich richtig gut von Blends befreien,.....

Cu Selur

Participate now!