Oude filmbeelden interpoleren met AI

[t4600c]

DAIN (Depth-Aware Video Frame Interpolation)

Deze software kan videobeelden interpoleren en zo het framerate oopschroeven en vloeiender maken. Dit is vooral handig om oude beelden opgenomen met 14-24 FPS omhoog te krijgen met een veelvoud daarvan. Het programma ondersteunt een interpolatie van 2x, 4x en 8x.

Om 720p beelden te renderen is minimaal 8Gb aan videogeheugen nodig. 11Gb voor 820p. Voor 1080p of hoger is iets nodig zoals een RTX TITAN nodig met 24Gb videogeheugen.

2x interpoleren op 720p kost ongeveer 30-60 minuuten per 1 minuut video.

Hier wat voorbeelden die ik gemaakt hebt:

16mm beelden uit 1920 interpoleren van 16fps naar 24fps:

Apollo 14 16mm beelden van 12 naar 24fps:

Apollo 15 landing in 24fps:

Apollo 15 opstijging in 24fps:

Apollo 15 LRV EVA van 6-12 fps naar 24fps:

[Gomez12]

Tja, wat is het nut ervan?

Want bij die 1920 beelden krijg ik eerder het idee dat jouw versie gewoon gefaked is, omdat dat stotterende etc bij 1920 beelden hoort.

En bij je ruimte vaart filmpjes krijg ik voornamelijk zo'n gevoel dat flat earthers en maanlanding fakers er vanalles uit gaan halen wat gewoon fouten in AI zijn en niet op film...

Het kan iets prettiger kijken zijn, maar voor serieus gebruik wil je toch de originele beelden bewaren...
Imho leuk voor een persoonlijk bruilofts filmpje, maar laat de klassiekers gewoon de klassiekers zijn...

[DukeBox]

Hoe gaaf de techniek ook is, in vind het niet veel toevoegen. Het lijkt nu meer op 'nieuw' materiaal dat oud is gemaakt.

b.t.w. met meerdere videokaarten kan je het geheugen bij elkaar optellen minus 2GB per kaart.

[ Voor 28% gewijzigd door DukeBox op 01-03-2020 15:11 ]

[t4600c]

DukeBox schreef op zondag 1 maart 2020 @ 15:01:
Hoe gaaf de techniek ook is, in vind het niet veel toevoegen. Het lijkt nu meer op 'nieuw' materiaal dat oud is gemaakt.

b.t.w. met meerdere videokaarten kan je het geheugen bij elkaar optellen minus 2GB per kaart.

DAIN-AI ondersteunt op dit moment nog geen scaling over 2 of meer kaarten.

[DukeBox]

t4600c schreef op zondag 1 maart 2020 @ 15:13:
DAIN-AI ondersteunt op dit moment nog geen scaling over 2 of meer kaarten.

Wel via nvidia vComputeServer en dan via GPU Aggregation en cuda binding.

[ Voor 9% gewijzigd door DukeBox op 01-03-2020 15:18 ]

[t4600c]

Incomplete combinatie van 16mm filmopnamen en TV uitzending. Hopelijk uiteindelijk compleet en met de hasselblad foto's die ook tijdens de EVA gemaakt zijn. Interpolatie van 6 naar 24fps, ongeveer 24 uur rendertijd:

[ Voor 10% gewijzigd door t4600c op 18-03-2020 20:53 ]

[Gomez12]

Tja, maar wat heb je hieraan?

Het is een mooier plaatje, maar het is/wordt wel steeds faker.

Ik durf er geld op in te zetten dat als je het echt zou willen dat je het hele filmpje zo fake kan verklaren omdat de ML/AI ergens een pixel verkeerd heeft gezet in 1 frame waardoor iets achter iets anders lijkt te zitten ipv ervoor.

Bijv je laatste filmpje daar staan er 2 dingen naast elkaar, alleen het linker filmpje != het rechter filmpje (of de computer heeft er echt hele dingen bij verzonnen, maar de zoom klopt simpelweg niet, links bevat een groter beeld dan rechts).

Zoals ik eerder al zei, leuk voor je oude bruilofts filmpjes, maar ga niet met space-filmpjes die soort geintjes uithalen. Het verslechterd de discussie over space/flat earth etc alleen maar omdat je er simpelweg gefakte spullen ingooit.

[t4600c]

Links 16mm filmopnamen van 6 FPS naar 24
Rechts live tv beelden van videocamera, 25fps.

Natuurlijk zet de computers er nieuwe pixels bij, in feiten genereert het gehele nieuwe frames door 2 echte frames te vergelijken en verwerken met een getrained neural network.

Als je lang naar de geïnterpoleerde frames kijkt zie je duidelijk de fouten, maar omdat de beelden zo snel voorbij gaan merkt je dat (meestal) niet op.

Ik geef duidelijk aan bij elke video dat de beelden geïnterpoleerd zijn. Ik ga niet iets niet doen omdat een plat-aarder er wat in gaat vinden. Dat doen ze toch wel, orginele beelden of niet.

[ Voor 85% gewijzigd door t4600c op 19-03-2020 12:06 ]

[chaoscontrol]

Ik snap het gezanik van @Gomez12 niet zo, je hoeft er niet op te reageren. Vind het leuk gedaan. Dankzij deze technieken kijk je toch wat makkelijker van die oude content terug. Ik zelf krijg meer van de inhoud mee omdat ik niet zo wordt afgeleidt door het gestotter en geknipper.

[t4600c]

Hoef ik meer te zeggen?

[Anoniem: 604938]

IMDB: They Shall Not Grow Old (2018)

Gebruikt ook zoiets. Ik vond het enorm veel toevoegen. Het maakt de beelden een tikkeltje "realistischer". Het voelt minder ouderwets en je kunt je er net iets beter mee inleven. Hopelijk verbeterd de techniek snel zodat er minder artefacten optreden.

[TNW]

Anoniem: 604938 schreef op dinsdag 24 maart 2020 @ 21:18:
IMDB: They Shall Not Grow Old (2018)

Gebruikt ook zoiets. Ik vond het enorm veel toevoegen. Het maakt de beelden een tikkeltje "realistischer". Het voelt minder ouderwets en je kunt je er net iets beter mee inleven. Hopelijk verbeterd de techniek snel zodat er minder artefacten optreden.

Ook gezien en IMO een goed voorbeeld van wat dit soort technologie kan doen.

Geldt niet voor alles trouwens, oude klassieke films zie ik het liefst zonder interpolatie op 25 fps. Het kan wel stop motion special effects enorm verbeteren, zoek maar eens op die verbeterde Terminator 1 scène

[t4600c]

Apollo 17 CSM & LM during lunar orbit revolution 11
16mm interpolated from 6 to 24fps with Hasselblad photos.

Monday 11, December, 1972

Audio, photos & timings: Apollo17.org
16mm Footage: ALSJ
Music: Rhubarb by Aphex Twin

[t4600c]

Dit is onzin natuurlijk... ik kan er wel van koken!

[MedionAkoya]

Ja en nu?
Blijkbaar heb je muziek gebruikt van Tony Anderson en heb je perongeluk een paar seconden aan beelden van Discovery CEEMCA (Central and Eastern Europe, Mediterranean and Central Asia) gebruikt.

[t4600c]

MedionAkoya schreef op dinsdag 31 maart 2020 @ 17:15:
Ja en nu?
Blijkbaar heb je muziek gebruikt van Tony Anderson en heb je perongeluk een paar seconden aan beelden van Discovery CEEMCA (Central and Eastern Europe, Mediterranean and Central Asia) gebruikt.

Van Discovery CEEMCA?

Je bedoeld van de NASA, betaald door Amerikaanse belastingbetalers en in public domain.

Afwachten wanneer CEEMCA de strike intrekt, als ze niks zeggen na 1 maand gaat ie er sowieso af.

[ Voor 11% gewijzigd door t4600c op 31-03-2020 17:56 ]

[Gomez12]

t4600c schreef op dinsdag 31 maart 2020 @ 17:54:
[...]
Van Discovery CEEMCA?

Je bedoeld van de NASA, betaald door Amerikaanse belastingbetalers en in public domain.

A: Hoe weet je dat het gedeelte wat jij hebt gebruikt van NASA is?
B: Lang niet alles wat NASA maakt gaat in public domain, oftewel hoe weet jij zo zeker dat het met dit materiaal zo is?

Afwachten wanneer CEEMCA de strike intrekt, als ze niks zeggen na 1 maand gaat ie er sowieso af.

Ehm, je doet zeker niet zoveel op youtube, CEEMCA zal uit zichzelf niets meer doen. Dus ze zullen dit ding ook niet uit zichzelf intrekken, daarvoor moet jij actie ondernemen...

[t4600c]

Gomez12 schreef op dinsdag 31 maart 2020 @ 19:04:
[...]

A: Hoe weet je dat het gedeelte wat jij hebt gebruikt van NASA is?
B: Lang niet alles wat NASA maakt gaat in public domain, oftewel hoe weet jij zo zeker dat het met dit materiaal zo is?


[...]

Ehm, je doet zeker niet zoveel op youtube, CEEMCA zal uit zichzelf niets meer doen. Dus ze zullen dit ding ook niet uit zichzelf intrekken, daarvoor moet jij actie ondernemen...

Omdat mijn bron recente hoge kwaliteit scans zijn van de originele 16mm magazijnen, van archive.org uploaded door NASA personeel, of het Apollo Flight Journal. Niks meer en niks minder.

Hoe dan ook, CEEMCA kan dan wel 16mm fragmenten hebben gebruikt in een docu maar dat geeft hun natuurlijk geen rechten tot die fragmenten.

Ehm, jij kijkt zeker niet goed? zie "Dispute under review"

Heel vaak als ik amateur opnamen van NASA missies op YT zet krijg ik een claim omdat stukken zijn gebruikt in documentaires, samples in muziek. Ik geef gewoon aan dat mijn bron niet de docu of muziek is en het public-domain materiaal is of van de NASA.

[t4600c]

Discovery will blijkbaar interresant doen tegenover mij en heeft de dispute gerejected. Maar zij weten nog niet dat ik vééél erger kan zijn.

[t4600c]

Een aantal kijkers hebben aangegeven dat ze liever de beelden zien met alleen de NASA stemmen, zonder muziek. De komende tijd zal ik die mensen blij maken.

[ Voor 22% gewijzigd door t4600c op 04-04-2020 16:50 ]

[t4600c]

Laten we hopen dat de video unblocked blijft en de claim uiteindelijk wordt verwijderd.

[ Voor 29% gewijzigd door t4600c op 04-04-2020 23:34 ]

[t4600c]

De complete Apollo 13 16mm collectie:

[t4600c]

The Apollo 16 Deep Space EVA, 16mm + TV:

[Wormaap]

@t4600c: Kun je wellicht nog wat meer informatie bij je posts zetten? Hoewel dit subforum zeker een plek is om werk te tonen waar je trots op bent, wordt het zo wel een beetje een dumpplek. Ik vind het persoonlijk hartstikke gaaf wat je doet, en het maakt de beelden een stuk leuker om te bekijken. Alleen blijft het hier natuurlijk een discussieforum, en ik zie niet helemaal waar het in dat opzicht naar toe kan gaan

[t4600c]

Ik zal als ik tijd heb aan een uitleg werken hoe dit te doen.

[t4600c]

Apollo 14 landing, EVA en maanlancering is klaar, hier een snelle screenshot van mijn workflow:

[t4600c]

Het interpolatie programma is trouwens HIER te downloaden. Patreons lopen 1 week voor op updates.

Als je video/film beelden wil interpoleren met een redelijke resolutie (360p) is 4Gb videomemory echt het minimum. Met 8gb haal ik net 4:3 720p. Afhankelijk van kaart en resolutie reken tussen de 30 minuten á 1 uur rendertijd per 1 minuut beeld voor 2-4x interpolatie.

Oh ja, en het werkt ALLEEN met een Nvidea kaart, niet AMD of Intel.

Apollo 14: Landing, EVA & lancering.

[t4600c]

Ik heb nu 100 subscribers op YouTube! en ik zit te denken om een Q&A video te maken.

Dus kom maar op met vragen!

[t4600c]

Apollo 11: De eerste stappen en verdere maanwandeling:

[ Voor 29% gewijzigd door t4600c op 16-05-2020 15:10 ]

[Gomez12]

1 vraag eigenlijk, zou je het voor de grap eens met een oldschool Command & Conquer filmpje kunnen doen?

EA had namelijk de bron niet meer en heeft zelf een verbeter algoritme moeten bedenken voor de remastered-filmpjes maar ik ben eigenlijk wel benieuwd hoe deze techniek zich daartoe verhoudt

[t4600c]

Gomez12 schreef op zaterdag 16 mei 2020 @ 23:00:
1 vraag eigenlijk, zou je het voor de grap eens met een oldschool Command & Conquer filmpje kunnen doen?

EA had namelijk de bron niet meer en heeft zelf een verbeter algoritme moeten bedenken voor de remastered-filmpjes maar ik ben eigenlijk wel benieuwd hoe deze techniek zich daartoe verhoudt

Leef je uit!

[t4600c]

Een snelle kijk achter de schermen:


[YouTube: Behind the scenes: Apollo rover traverse interpolation]


En wat meer beelden van de laatste tijd:

[ Voor 97% gewijzigd door t4600c op 21-06-2020 14:03 ]

[t4600c]

Beelden opgenomen tijdens het gebruik van de lunar roving vehicle, Apollo 16:

[t4600c]

Niet meer tevreden met de Archive.org 720p-bestanden...


Ik heb gekeken naar Apollo 16mm-scans van de hoogste kwaliteit en het hele archief is 30Tb, 1440x1080 ProRes444-scans.

Helaas zei de archivist dat het een nonstarter is omdat het er niet naar uitziet dat ik het benodigde budget heb. Normaal gesproken verkopen aan docs, studio's en tv-programma's.

Ik zal zien of ik af en toe een paar magazijnen kan kopen. Dit zou een lagere productiesnelheid betekenen, maar ordes van grootte hogere kwaliteit.

De kwaliteit van 1080p-scans is duidelijk in de onderstaande frames:

YouTube: Apollo 11 in 24fps: LM & CM Rendezvous

[Blokker_1999]

t4600c schreef op dinsdag 31 maart 2020 @ 20:07:
[...]


Omdat mijn bron recente hoge kwaliteit scans zijn van de originele 16mm magazijnen, van archive.org uploaded door NASA personeel, of het Apollo Flight Journal. Niks meer en niks minder.

Hoe dan ook, CEEMCA kan dan wel 16mm fragmenten hebben gebruikt in een docu maar dat geeft hun natuurlijk geen rechten tot die fragmenten.

Ehm, jij kijkt zeker niet goed? zie "Dispute under review"

Heel vaak als ik amateur opnamen van NASA missies op YT zet krijg ik een claim omdat stukken zijn gebruikt in documentaires, samples in muziek. Ik geef gewoon aan dat mijn bron niet de docu of muziek is en het public-domain materiaal is of van de NASA.

En, hoe is dit afgelopen? Je staat natuurlijk volledig in je recht. Alle beelden met betrekking tot NASA zijn gewoon vrijgegeven in het publieke domein.

[t4600c]

Blokker_1999 schreef op dinsdag 21 juli 2020 @ 12:50:
[...]
En, hoe is dit afgelopen? Je staat natuurlijk volledig in je recht. Alle beelden met betrekking tot NASA zijn gewoon vrijgegeven in het publieke domein.

Klopt.

De copyright claim is inmiddels ingetrokken.

[ Voor 3% gewijzigd door t4600c op 21-07-2020 16:21 ]

[t4600c]

Apollo 11 ascent van maanoppervlakte. Met Nederlands NOS commentaar:

[t4600c]

Apollo 16 in 60fps: Grand Prix

Apollo 16 in 60fps: Grand Prix

[ Voor 45% gewijzigd door t4600c op 05-08-2020 22:26 ]

[t4600c]

Laten we dit proberen met oudere beelden... de eerste Amerikaanse ruimtewandeling, Gemini 4!

Deze EVA is opgenomen met twee 16mm camera's in 6 plaatjes per seconden. De lengte van opnamen was belangrijker dan het aantal plaatjes per seconden.

Een probleem met de ruwe scans is dat de beelden erg veel op en neer bewegen. Dit was een probleem met de camera die blijkbaar niet goed de film doorvoerde. Gelukkig is dit grotendeels op te lossen met Adobe Aftereffects, met dank aan I Need More Space voor het stabiliseren van de beelden.

Vervolgens 4x interpolatie met DAIN, van 6fps naar 24fps. Ongeveer 8 uur rendertijd voor 4:3 1080p, per hoek. Totaal dus ongeveer 16 uur op volle toeren warmdraaien.

Hier een vergelijking:

En hier beide hoeken in 24fps met geluid:

Dit is tegelijk ook de beste uitgave van deze beelden ooit aan het publiek, prachtig!

[Napsju]

@t4600c Bijzonder gaaf! Zijn er misschien nog mogelijkheden om die wapperende riem bij het onderste filmpje beter te krijgen? Voorbeeld van verspringen bij 1:50.

[t4600c]

Napsju schreef op zaterdag 3 oktober 2020 @ 23:43:
@t4600c Bijzonder gaaf! Zijn er misschien nog mogelijkheden om die wapperende riem bij het onderste filmpje beter te krijgen? Voorbeeld van verspringen bij 1:50.

Helaas zijn de beweging van de riemen en slangen vaak net wat te groot tussen 2 beelden voor het algoritme. Bij te grote veranderingen kan het geen wijs meer uit maken van de verschillen en genereert het grotendeels wazige soep rond deze plekken.

Maar de ontwikkelingen rond kunstmatige intelligentie gaan erg snel, dus wellicht is er in 1-2 jaar een algoritme wat veel beter om kan gaan met grote veranderingen.

Gelukkig vorderen de meeste gebeurtenissen in de ruimte langzaam en bedachtzaam, dus deze beelden lenen zich er goed aan dit soort interpolatie. Vooral de beelden opgenomen in 12fps

[t4600c]

Zit te denken hoe ik het beste een Nederlandstalige tutorial-video kan maken over dit programma.

Welke facetten willen jullie dat ik onderhanden neem?

[ Voor 5% gewijzigd door t4600c op 28-10-2020 22:22 ]

[DukeBox]

t4600c schreef op woensdag 28 oktober 2020 @ 22:21:
Zit te denken hoe ik het beste een Nederlandstalige tutorial-video kan maken over dit programma.

Misschien eerst gewoon een demo ? Vermoedelijk komen daar nog wel vragen over.

Wat ik mij afvroeg, is er nog steeds zoveel geheugen nodig of is dat onderhand verbeterd ?
Alle nieuwe RTX kaarten zijn (nog) vrij karig qua geheugen. Las wel iets over multi GPU support maar kan niet alles lezen zonder abbo op die site.


b.t.w. ik was in het begin nogal kritisch maar wat ik zo zie (met name de 6fps -> 24fps) begin ik het toch wel erg gaaf te vinden. Zelf ook eens een probeerseltje opgestart met de trouwfilm van mijn ouders, ben benieuwd.

[ Voor 31% gewijzigd door DukeBox op 28-10-2020 23:21 ]

[dogtagz]

Kan je wat meer vertellen over de applicatie?
Werk jij zelf als software ontwikkelaar? Waar draait dit zo al op?

[DukeBox]

dogtagz schreef op woensdag 28 oktober 2020 @ 22:51:
Waar draait dit zo al op?

Op alles zolang je maar CUDA hebt en genoeg geheugen (VRAM) voor hogere resoluties.

Ik merk dat 11GB (GTX 1080Ti) nu net voldoende is voor 1440x1080 (voor mij net goed aangezien mijn bron materiaal bijna allemaal die resolutie heeft).

Ik doe nu eerst een stabilisatie over het bron materiaal (bij mij nodig omdat het allemaal hand geschoten 8mm is), eventueel met een de-flicker filter (per film nodig) en als laatste door DAIN, dat geeft bij mij het beste resultaat.

@t4600c Heb je nog een tip om uit te komen op 60fps als het bron materiaal 20fps is ? Ik kan met versie 0.45 x2 (40fps) of x4 (80fps) doen maar zou eigenlijk x3 willen hebben. Ik doe het nu dus op x4 en daarna schaal ik het weer terug naar 60fps als ik het omzet naar HEVC.

[dylan111111]

DukeBox schreef op vrijdag 30 oktober 2020 @ 13:05:
[...]

Op alles zolang je maar CUDA hebt en genoeg geheugen (VRAM) voor hogere resoluties.

Ik merk dat 11GB (GTX 1080Ti) nu net voldoende is voor 1440x1080 (voor mij net goed aangezien mijn bron materiaal bijna allemaal die resolutie heeft).

Ik doe nu eerst een stabilisatie over het bron materiaal (bij mij nodig omdat het allemaal hand geschoten 8mm is), eventueel met een de-flicker filter (per film nodig) en als laatste door DAIN, dat geeft bij mij het beste resultaat.

@t4600c Heb je nog een tip om uit te komen op 60fps als het bron materiaal 20fps is ? Ik kan met versie 0.45 x2 (40fps) of x4 (80fps) doen maar zou eigenlijk x3 willen hebben. Ik doe het nu dus op x4 en daarna schaal ik het weer terug naar 60fps als ik het omzet naar HEVC.

Minimaal CUDA 5.0 en hoger is nodig voor DAIN-APP.

Onder het tabje "Interpolation Options" in DAIN-APP heb je onder "Interpolation Algorithm" de optie voor Experimental, hierbij kan je voor x3 kiezen zodat je van 20fps -> 60fps maakt. Ben benieuwd wat je beter resultaat geeft!

Zelf heb ik ook een 1080ti en Tesla M40 24GB, gebruik je Half-Precision onder de Beta opties om 1440x1080 te kunnen doen op de 1080ti?

[DukeBox]

dylan111111 schreef op vrijdag 30 oktober 2020 @ 13:33:
Onder het tabje "Interpolation Options" in DAIN-APP heb je onder "Interpolation Algorithm" de optie voor Experimental, hierbij kan je voor x3 kiezen zodat je van 20fps -> 60fps maakt. Ben benieuwd wat je beter resultaat geeft!

Maar daar staat 'not working' én 'requires more memory'. Daar heb niet echt vertrouwen in maar zal het zo eens proberen.

..gebruik je Half-Precision onder de Beta opties om 1440x1080 te kunnen doen op de 1080ti?

Nee, die optie heb ik niet eens.
edit: heb nu versie 0.47, ga daar eens even mee spelen om te kijken of die dat wel doet.

Overigens zal ik binnenkort eens testen op een Titan RTX maar dan moet ik wel even kijken hoe ik die aan mijn laptop krijg aangezien de eGPU case denk ik te weinig vermogen levert (max 250Watt).

[ Voor 5% gewijzigd door DukeBox op 30-10-2020 15:15 ]

[t4600c]

DukeBox schreef op vrijdag 30 oktober 2020 @ 13:05:
[...]

Op alles zolang je maar CUDA hebt en genoeg geheugen (VRAM) voor hogere resoluties.

Ik merk dat 11GB (GTX 1080Ti) nu net voldoende is voor 1440x1080 (voor mij net goed aangezien mijn bron materiaal bijna allemaal die resolutie heeft).

Ik doe nu eerst een stabilisatie over het bron materiaal (bij mij nodig omdat het allemaal hand geschoten 8mm is), eventueel met een de-flicker filter (per film nodig) en als laatste door DAIN, dat geeft bij mij het beste resultaat.

@t4600c Heb je nog een tip om uit te komen op 60fps als het bron materiaal 20fps is ? Ik kan met versie 0.45 x2 (40fps) of x4 (80fps) doen maar zou eigenlijk x3 willen hebben. Ik doe het nu dus op x4 en daarna schaal ik het weer terug naar 60fps als ik het omzet naar HEVC.

Mij lukt het sommige 1440x1080 opnamen te verwerken met 8Gb vram. 1920x1080 moet mij zeker lukken nu ik sinds 1 week een 2080 Ti heb...

Wat voor software gebruik jij voor stabilisatie en de-flicker? Dat wil ik graag toepassen op een aantal opnamens...

20 naar 60fps moet met 3x.

Het experimentele algoritme laat 3, 5 en 7x toe maar deze werkt niet met alle instellingen en niet met elke versie. Deze verbruikt ook meer vram maar is wel iets sneller.

Ik heb intresse met jouw RTX Titan experimenten. 2k moet wel mogelijk zijn. 4k niet helaas.

[ Voor 3% gewijzigd door t4600c op 01-11-2020 21:42 ]

[DukeBox]

t4600c schreef op zondag 1 november 2020 @ 21:41:
Wat voor software gebruik jij voor stabilisatie en de-flicker? Dat wil ik graag toepassen op een aantal opnamens...

Voor de-flicker gebruik ik VirtualDub-1.10.4 met deflicker filter van Donald Graft (x86 versie van VirtualDub omdat er geen x64 versie van het filter is).
Dit heb maar bij enkele gebruikt waar vermoedelijk door zon inval in de lens nogal een irritant beeld was, hiermee was het eigenlijk volledig verholpen in de gevallen waar ik daar last van had.
Ik had ook getest met msu_deflicker flter maar het resultaat daarvan (ondanks dat je meer kan instellen) was bij minder goed.

Voor stabilisatie het hangt een beetje van het bron materiaal af en het gewenste resultaat.

VirtualDub-1.10.4-AMD64 met Deshaker plugin (hier is wel een x64 versie van) werkt het meest eenvoudig en secuur (door de 2-pass denk ik) maar het grootste probleem is dat ik daar het zoom level niet kon bijstellen. Hiermee bedoel ik wat van het beeld gesneden wordt om daarbinnen te stabiliseren. Ik had een paar stukken film waar er zoveel vanaf werd gesneden (omdat er extreem veel schokken in beeld waren) dat er nog maar weinig detail over bleef (en voor DAIN het resultaat daardoor ook minder werd).

Daarnaast had ik in enkele gevallen dat de stabilisatie niet een 'focus' had op het juiste onderwerp. Bij een pan shot was bijvoorbeeld een boom helemaal stabiel maar de mensen die t.o.v. de boom door het beeld liepen 'sprongen' door het beeld.

Dus ben ik nu overgestapt op Shotcut, hier kon ik het zoomlevel op bijvoorbeeld -10 zetten én was de analyze voor personen/objecten in mijn geval beter. met -10 krijg je wel een soort 'fotostapel effect' omdat je soms de nieuwe frames niet volledig het vorige frame afdekken maar in de praktijk vind ik dat in de enkele gevallen dat dat nu voorkomt helemaal niet storend.

Het experimentele algoritme laat 3, 5 en 7x toe maar deze werkt niet met alle instellingen en niet met elke versie. Deze verbruikt ook meer vram maar is wel iets sneller.

Ik ben een beetje bang voor het stuk 'may cause artifacts' dat dan al het werk voor niets is. Ik ga dan liever naar 80 en schaal ik evt. terug naar 60. Daarnaast red ik het dan denk ik ook net niet met geheugen.

Ik heb intresse met jouw RTX Titan experimenten. 2k moet wel mogelijk zijn. 4k niet helaas.

Ik ook maar dat gaat nog wel even duren voordat ik daar mee aan de slag kan. Vooralsnog moet ik het met mijn 1650, 1660s en 1080ti doen.

[t4600c]

Ter gelegenheid van 50 jaar jubileum Apollo 14, hier zowel de landing als maanwandeling geïnterpoleerd van 12 naar 60fps. De ruimtewandeling ook met TV en hasselblad foto's:

Landing:

Maanwandeling:

[ Voor 20% gewijzigd door t4600c op 07-02-2021 17:51 ]

[t4600c]

Ben nu bezig met Mercury/John Glenn beelden. Om te interpoleren van 6 naar 24fps en samen te stellen met geluid.

Heb de gehele John Glenn 16mm opnamen als HD ProRes422 HQ telecine.

Er zitten ook delen tussen opgenomen met 1fps, maar daarbij is de tijdresolutie te laag om nog iets mee te kunnen.

Zie hier een vergelijking met het origineel:

[BlueTooth76]

Leuk om te volgen!

Inmiddels ben ik ook met DAIN en Topaz Video Enhancer AI bezig en in m'n zoektocht kwam ik RIFE als alternatief voor DAIN tegen (RIFE APP).

Gaat vele malen sneller en ik moet zeggen, het resultaat lijkt hetzelfde, heb zelfs het idee dat ik minder artifacts heb.
Misschien ook iets om naar te kijken als optie?

Sucessor to Dain-App, Rife-App use a new algorithm that can be found clicking here.
Rife-APP can run 25X faster than Dain-App and use way less Vram. A Nvidia card can still boost the speed of the application, but unlike Dain-App, it can also run on the CPU (slower)

[ Voor 27% gewijzigd door BlueTooth76 op 03-04-2021 10:16 ]