Super Slow Motion : Nvidia utilise l'IA pour transformer une vidéo standard

Le par Jérôme G.  |  6 commentaire(s)
Super-SloMo-Nvidia

À partir d'une vidéo à 30 images par seconde, l'obtention d'un ralenti à 240 images par seconde grâce à un système de deep learning. Nvidia vante du super slow motion pour sa qualité.

Nvidia annonce que ses chercheurs ont développé un système basé sur du deep learning capable de proposer des vidéos en slow motion de haute qualité à partir de vidéos capturées à 30 images par seconde.

En s'appuyant sur des GPU Tesla V100 et le framework de deep learning PyTorch tirant parti de l'accélération GPU (CUDA Deep Neural Network de Nvidia), le système a été entraîné avec plus de 11 000 vidéos d'activités quotidiennes et sportives filmées nativement à 240 images par seconde.

Nvidia explique qu'une fois entraîné, un réseau de neurones à convolution est capable de prédire les images supplémentaires. Autrement dit, pour une vidéo à 30 images par seconde, il est en mesure de prédire à quoi devraient ressembler les 210 images intermédiaires entre deux images pour obtenir un ralenti à 240 images par seconde.

Un jeu de données distinct a été utilisé pour valider l'exactitude du système et sa cohérence pour générer des images intermédiaires. Un même résultat peut être obtenu avec une vidéo à 60 images par seconde pour obtenir un ralenti à 480 images par seconde.

Pour le moment, il ne s'agit toutefois que d'un travail de recherche, et il n'est pas question d'une quelconque forme de commercialisation. Le cas échéant, on peut imaginer que le traitement s'effectuera essentiellement dans le cloud.

  • Partager ce contenu :
Complément d'information

Vos commentaires

Trier par : date / pertinence
CoRsCiA offline Hors ligne VIP icone 6640 points
Premium
Le #2019016
et ils ont étudiés les videos des SloMo Guys en reference .... DUDE !
Safirion offline Hors ligne VIP icone 41070 points
Le #2019020
C'est pas mal du tout
Anonyme offline Hors ligne VIP avatar 15769 points
Le #2019049
Ca aura de l'avenir je pense. Mais du coup l'image ne retraduira pas fidèlement la,réalité dans ses moindre détails...
Safirion offline Hors ligne VIP icone 41070 points
Le #2019086
cycnus a écrit :

Ca aura de l'avenir je pense. Mais du coup l'image ne retraduira pas fidèlement la,réalité dans ses moindre détails...


Bah on s'en rend compte sur les frames qui sont générées, elles sont bien plus floue que les frame réelle
Mais ça, c'est normal.
Anonyme offline Hors ligne Senior avatar 406 points
Le #2019203
A proipos de voir le réel
https://youtu.be/j6h6fUKnRAY?t=8m8s

A voir et à revoir un bijou
Anonyme offline Hors ligne Senior avatar 406 points
Le #2019206
Le passage sur le sigle IBM écrit avec 35 atomes de fer
icone Suivre les commentaires
Poster un commentaire