Ne, Wunder nicht, aber schon ziemlich gut bei der Ausgangsauflösung. 
Super Resolution Erfahrungen?
-
Ist doch der Traum für Streamer, die eine Webcam benutzen.
-
Beeindruckend ist die Kombination aus SwinIRx4+vsCodeFormer: https://imgsli.com/MTY2NDA3 aber als LiveFilter momentan nicht zu gebrauchen.
-
Beeindruckend ist die Kombination aus SwinIRx4+vsCodeFormer: https://imgsli.com/MTY2NDA3 aber als LiveFilter momentan nicht zu gebrauchen.
Schaut gut aus. Und wieso nicht als Livefilter zu gebrauchen, wenn es schnell genug wäre?
Erinnert an die Asia Filter, die es in Massen gibt.
-
Das Problem ist das 'schnell' SwinIRx4+vsCodeFormer fressen gut VRAM und schnell sind die nicht.
SwinIRx4+vsCodeFormer aber temporally stable ist es nicht => mit 3xQTGMC_type3 noch dazu ist es besser, aber noch nicht perfekt. So wie es aktuell ist definitiv nicht für live tauglich.
-
Das dürften ja Modelle sein, die Einzelbilder transformieren. Interessant würden Modelle sein, die über mehrere Frames - wie rife - gehen, dafür dürfte aber die Hardware lange noch nicht reichen. Selbst mit tensorrt bekommst du kaum realtime hin.
Wo nimmst du eigentlich deine Modelle her?
-
Ich spüre gerade das ich nicht mehr auf dem laufenden bin
-
Schaut nicht schlecht aus.
Wobei ich so langsam den Überblick über die verschiedenen Modelarten verliere.
Ich frage mich, ob man auch Diffusion Modelle irgendwann zur Restauration verwenden kann. Oder kommt da immer zufälliges raus.
Sind ja schon die ersten Text-to-Video da:
-
Denke aber generell wird das sicher kommen, dass man Diffusion Modelle und dergleichen zur Restauration verwenden wird, auch wenn man da immer auf die 'Authentizität' achten muss.
Das Problem ist halt, man bei Video i.d.R. nur eine Verbesserung und nicht ein Ersetzen haben will.
Wenn man bei codeformer als Gewichtung 0 verwendet, passiert halt so etwas: https://imgsli.com/MTY2NDI2
Wenn man ein Familienvideo aufbessern will und die Oma wird zu Cindy Crawford, weil man dem Model gesagt hat, es möge das Bild aufbessern,...Cu Selur
-
Denke aber generell wird das sicher kommen, dass man Diffusion Modelle und dergleichen zur Restauration verwenden wird, auch wenn man da immer auf die 'Authentizität' achten muss.
Das Problem ist halt, man bei Video i.d.R. nur eine Verbesserung und nicht ein Ersetzen haben will.
Wenn man bei codeformer als Gewichtung 0 verwendet, passiert halt so etwas: https://imgsli.com/MTY2NDI2
Wenn man ein Familienvideo aufbessern will und die Oma wird zu Cindy Crawford, weil man dem Model gesagt hat, es möge das Bild aufbessern,...Cu Selur
Oma sah doch schon immer so aus
Da ist es ärgerlich, schwierig wirds, wenn die Leute sowas aus Absicht machen.Also absichtliche Geschichtsfälschung und aus Politikgründen verbreiten oder aus Gier. Ich bin mir sicher, dass der Markt aus Stock Bildern bald zerstört ist.
Wer damit sein Geld verdient, tut mir leid.
-
Nebenbei vs-grlir unterstützt nun mehrere Modi, cuda_graphs und fp16.
Code
Display More:param model: Model to use. 0 = Blind Image SR 1 = Defocus Deblurring 2 = Motion Deblurring (GoPro) 3 = Motion Deblurring (RealBlur-J) 4 = Motion Deblurring (RealBlur-R) 5 = Demosaicking 6 = Denoising (sigma 15) 7 = Denoising (sigma 25) 8 = Denoising (sigma 50) 9 = JPEG compression artifact removal (quality 10) 10 = JPEG compression artifact removal (quality 20) 11 = JPEG compression artifact removal (quality 30) 12 = JPEG compression artifact removal (quality 40) 13 = Classical Image SR (scale 2) 14 = Classical Image SR (scale 3) 15 = Classical Image SR (scale 4)Quelle: https://github.com/HolyWu/vs-grli…lir/__init__.py
mode 0, 12-15 sind zum Upscaling (=0 ist der mode der schon immer unterstützt wird).
1-12 sind zum Filtern.
Nice!
Cu Selur
-
Finde, das sieht schon sehr gut aus. Wie sieht es ohne addGrain aus?
Immer wenn ich Grain sehe, fühlt sich das nach VHS Quali an. -
Danke sehr. Finde ich besser, aber auch aus dem Grund, dass man beim Abspielen mehr machen kann.
Also je nach Abspielgerät nochmal Filter drauf. Würde man nochmal schärfen, sieht man Grain extrem. Aber das ist Geschmacksache.
Participate now!
Don’t have an account yet? Register yourself now and be a part of our community!