 Weer een mooie technische stap vooruit: deze week zouden in principe onderzoekers van het bedrijf Nvidia een neuraal netwerk voorstellen, dat zonder toezicht van de mens een willekeurig aantal frames aan een video kan toevoegen, om zo slow motion te simuleren.
Deze techniek noemen zij "variagle-lengt multi-frame interpolation". Een hele mondvol dus. Een eerste neuraal netwerk schat het patroon van de beweging van voorwerpen, opperflakken, en de hoeken tussen twee frames, en maakt zo een 2D vector van de beweging die te voorspellen valt, wat dan een 'flow field' genoemd wordt. Een tweede neuraal netwerk gebruikt dat flow field om te voorspellen welke delen van de scene achter andere delen ervan zouden verdwijnen, en past dan toe op de twee afbeeldingen. Vervolgens wordt het flow field gbruik om de afbeeldingen zo te maken dat de frames vlot in elkaar overvloeien.
Een tamelijk technische uitleg, maar een demo bij Venturebeat maakt alles veel duidelijker. Kort samengevat: om een video in slow motion te kunnen tonen, moet je heel veel frames per seconde hebben. Want anders krijg je een hortend beeld. Deze technologie geeft je een vloeiend beeld, door de ontbrekende frames zelf in te vullen.
https://venturebeat.com/2018/06/18/this-nvidia-neural-networ ...
|
