Un vieux chantier de FFmpeg vient enfin d’aboutir, et il ouvre l’accès direct à une fonction très convoitée des GeForce RTX. La conséquence est concrète : l’outil peut désormais générer des images intermédiaires côté GPU pour augmenter la fluidité d’une vidéo, sans repasser par une chaîne de rendu graphique classique.
FFmpeg branche l’interpolation vidéo NVIDIA sur Vulkan
Les développeurs de FFmpeg ont intégré la prise en charge de l’interpolation d’images accélérée par GPU de NVIDIA via l’API Vulkan. Pour un logiciel qui sert de colonne vertébrale à une large part du traitement multimédia moderne, de YouTube à d’innombrables services et applications, l’ajout est loin d’être anecdotique.
Concrètement, FFmpeg peut désormais exploiter des GeForce RTX pour prédire et générer l’image suivante, sans impliquer le pipeline de rendu traditionnel. NVIDIA étend ici à la vidéo un principe déjà familier dans le jeu : la génération d’images par estimation de mouvement.
Le moteur optique des GeForce RTX mis à contribution
La technologie repose sur le Optical Flow Accelerator, ou NVOFA, intégré aux GPU NVIDIA. FFmpeg utilise les données de trames fournies côté encodeur par NVENC, tandis que le bloc de calcul de flux optique produit des vecteurs de mouvement décrivant le déplacement des objets entre deux images consécutives.
À partir de ces informations, FFmpeg synthétise une image intermédiaire pour augmenter la cadence vidéo. NVIDIA désigne ce procédé sous le nom de Engine-assisted Frame-rate Up Conversion, ou FRUC. On est donc au-delà d’un simple algorithme de lissage : la logique de flux optique est traitée par un accélérateur matériel dédié, avec une charge bien plus faible qu’une interpolation purement logicielle sur CPU.
Support officiel à partir d’Ampere
Le bloc Optical Flow remonte à l’époque des GeForce RTX 20 Series Turing. En revanche, cette implémentation basée sur Vulkan ne prend officiellement en charge que les GeForce RTX 30 Series Ampere et les générations suivantes. Sont donc concernées les séries RTX 30, RTX 40 et RTX 50.
Dans les cas d’usage évoqués, la fréquence d’images est doublée : une vidéo en 30 FPS peut passer à 60 FPS, et un contenu cinéma en 24 FPS à 48 FPS. Le point important côté projet, c’est que l’intégration Vulkan évite la dépendance logicielle propriétaire qui avait empêché la fusion d’un précédent correctif en 2023.
Pour FFmpeg, c’est une évolution discrète mais structurante : dès qu’une fonction d’accélération de ce niveau entre dans l’outil de référence de la chaîne vidéo, elle devient mécaniquement plus accessible aux encodeurs, aux services en ligne et aux workflows automatisés. Reste ensuite la vraie question de fond, bien connue avec la frame generation : la fluidité supplémentaire est facile à mesurer, mais la qualité perçue dépendra toujours de la scène, du mouvement et de la tolérance aux artefacts.
Source : Phoronix
