Et si les films du futur étaient tournés par des solutions d’Intelligence Artificielle volantes ?
Une équipe de chercheurs de Carnegie Mellon, de l’université de Sao Paulo et de Facebook AI a publié un article qui va dans ce sens.
Cet article décrit une solution d’IA embarquée sur drones, capable de labelliser des éléments d’un flux vidéo en temps réel, en distinguant certains éléments comme “intenses”.
Pour ce faire, le modèle note en temps réel l’intensité des éléments la scène filmée, et fait automatiquement une mise au point sur l’évènement le plus intense lorsque celui-ci dépasse un seuil.
Le résultat est donc une scène d’ensemble qui passe à une focale sur le personnage principal, ce qui se rapproche des méthodes de réalisation de films.
Si le concept est assez simple, la vraie problématique avec ce type de modèle est l’entraînement.
Les chercheurs ont construit un dataset de 200 vidéos présentant une scène d’ensemble, et un élément d’intérêt.
Les vidéos ont été vues et labellisées à la main pour servir de train set, et le modèle a été intégré à un drone pour réaliser des tests en conditions réelles.
Si le résultat est encore loin d’un vrai film, les chercheurs notent que le résultat “dépasse leurs espérances”.
Source : https://arxiv.org/pdf/2011.10118.pdf
Post original : https://www.linkedin.com/posts/guillaumebesson_et-si-les-films-du-futur-%C3%A9taient-tourn%C3%A9s-activity-6749232462775255040-rpQ_