Super Slow Motion : Nvidia utilise l'IA pour transformer une vidéo standard

Le par  |  6 commentaire(s)
Super-SloMo-Nvidia

À partir d'une vidéo à 30 images par seconde, l'obtention d'un ralenti à 240 images par seconde grâce à un système de deep learning. Nvidia vante du super slow motion pour sa qualité.

Nvidia annonce que ses chercheurs ont développé un système basé sur du deep learning capable de proposer des vidéos en slow motion de haute qualité à partir de vidéos capturées à 30 images par seconde.

En s'appuyant sur des GPU Tesla V100 et le framework de deep learning PyTorch tirant parti de l'accélération GPU (CUDA Deep Neural Network de Nvidia), le système a été entraîné avec plus de 11 000 vidéos d'activités quotidiennes et sportives filmées nativement à 240 images par seconde.

Nvidia explique qu'une fois entraîné, un réseau de neurones à convolution est capable de prédire les images supplémentaires. Autrement dit, pour une vidéo à 30 images par seconde, il est en mesure de prédire à quoi devraient ressembler les 210 images intermédiaires entre deux images pour obtenir un ralenti à 240 images par seconde.

Un jeu de données distinct a été utilisé pour valider l'exactitude du système et sa cohérence pour générer des images intermédiaires. Un même résultat peut être obtenu avec une vidéo à 60 images par seconde pour obtenir un ralenti à 480 images par seconde.

Pour le moment, il ne s'agit toutefois que d'un travail de recherche, et il n'est pas question d'une quelconque forme de commercialisation. Le cas échéant, on peut imaginer que le traitement s'effectuera essentiellement dans le cloud.

Complément d'information

Vos commentaires

Gagnez chaque mois un abonnement Premium avec GNT : Inscrivez-vous !
Trier par : date / pertinence
Le #2019016
et ils ont étudiés les videos des SloMo Guys en reference .... DUDE !
Le #2019020
C'est pas mal du tout
Le #2019049
Ca aura de l'avenir je pense. Mais du coup l'image ne retraduira pas fidèlement la,réalité dans ses moindre détails...
Le #2019086
cycnus a écrit :

Ca aura de l'avenir je pense. Mais du coup l'image ne retraduira pas fidèlement la,réalité dans ses moindre détails...


Bah on s'en rend compte sur les frames qui sont générées, elles sont bien plus floue que les frame réelle
Mais ça, c'est normal.
Le #2019203
A proipos de voir le réel
https://youtu.be/j6h6fUKnRAY?t=8m8s

A voir et à revoir un bijou
Le #2019206
Le passage sur le sigle IBM écrit avec 35 atomes de fer
Suivre les commentaires
Poster un commentaire
Anonyme
Anonyme