Replay de Noël: Affirmer que quelque chose dans le futur sera différent du présent est un candidat à la Chose La Plus évidente à dire des prix de l’année. Mais la façon dont cela pourrait être différent dépassera toute compréhension actuelle, bien que étonnamment la technologie et les concepts qui alimenteront ce changement soient déjà là.

J’ai écrit récemment sur la façon dont la résolution n’est peut-être pas aussi importante maintenant que l’apprentissage automatique et l’IA progressent à un rythme tel que même les vieilles images des caméras SD peuvent être converties en une 4K convaincante. À l’avenir, ce type de traitement en temps réel à l’intérieur de la caméra elle-même est une évidence. Mais il y a d’autres concepts, beaucoup plus fous, qui pourraient bien être sur leur chemin, et ils sont basés sur la technologie qui est déjà là.

Remappage des visages des acteurs

Nous appelons cela de la Deepfakery, une façon de remplacer un acteur dans un film existant par un autre. Cela peut souvent être fait de manière extrêmement convaincante, et cela s’améliore. Imaginez maintenant que cela puisse se faire à huis clos, en direct pendant le tournage, sans avoir besoin d’une énorme banque d’ordinateurs pour faire tous les calculs.

Pourquoi voudrions-nous faire cela? C’est simple. Parfois, les acteurs à petit budget sont, eh bien, à petit budget. Pourquoi voudriez-vous que Keith Postlethaite, le tour de force des drames amateurs des West Midlands soit votre vedette principale alors que vous pourriez avoir Robert DeNiro à la place?

Ce n’est pas seulement le visage avec lequel les deepfakes en temps réel pourraient aider, mais aussi la voix. Bien sûr, cela ne serait pas légal dans des circonstances normales, mais les acteurs embauchent déjà leurs semblables. Un acteur comme DeNiro pourrait bien encore facturer un joli centime, mais vous économiserez sur le coût d’une remorque et d’un personnel dévoué!

Mais cela a un point sérieux. Même à faible budget, si vous tourniez un film au Royaume-Uni mais que vous deviez avoir quelqu’un des États-Unis, il pourrait toujours apparaître dans votre film. Cela signifie également que les acteurs peuvent effectivement être doublés et « faire » deux emplois en même temps.

Cartographie de profondeur et ensembles virtuels, la fin de l’écran vert

Les décors virtuels sont maintenant une réalité, mais à l’avenir, il sera possible de les créer dans l’appareil photo et de filmer comme une caméra op avec la réalité augmentée dans le viseur.

Une cartographie de profondeur haute résolution vraiment très bonne rendra cela possible car la caméra sera capable de cartographier efficacement les acteurs en 3D sans avoir besoin d’un écran vert ou d’un studio intérieur dédié. Ces capacités se répandront dans l’équipement prosumer, mais apparaîtront probablement sur les téléphones en premier!

La possibilité de le faire n’importe où sans un camion rempli d’ordinateurs changera la donne. Envie de filmer à New York pendant l’hiver quand vous êtes en France en plein été ? Pas de problème! Nvidia a déjà montré démonstrations de conversion de vidéos prises un jour d’été en une journée pluvieuse ou en une journée d’hiver. 

Ce type d’avancement sera assez démocratisant en ce qui concerne le cinéma, car cela signifie que les lieux grandioses et exotiques ne sont plus l’apanage d’un gros budget. Cela prendra un certain temps avant de pouvoir être fait en temps réel et être convaincant, mais il sera arriver.

Éclairage

L’éclairage dans le post est quelque chose qui était une blague, et, eh bien, c’est toujours le cas. Cependant, la cartographie de profondeur à haute résolution ouvre un énorme potentiel, non seulement pour le ré-éclairage en post, mais aussi pour le ré-éclairage en temps réel, virtuellement. Le mappage de profondeur signifie que vous avez une représentation 3D de l’environnement, et si elle est effectuée à une résolution suffisamment élevée, changer l’éclairage de la caméra devient une possibilité très réelle. 

Pourquoi voudrions-nous faire cela? Eh bien, encore une fois, tout le monde n’a pas le budget pour d’énormes IHM pour projeter des puits de lumière à travers les fenêtres. Attendre ce coucher de soleil parfait et cette heure dorée coûte du temps et de l’argent, en particulier au Royaume-Uni où ce qui aurait pu être un coucher de soleil fabuleux peut rapidement devenir une collection de nuages gris.

Combiné avec des ensembles et des emplacements virtuels ou augmentés, vous pourriez avoir le contrôle total de tout à tout moment. Pensée fantaisiste? Je ne pense pas. Au moment où j’écris ceci, il y a de plus grands esprits que les miens qui travaillent à faire de ce genre de choses une réalité.

Où nous allons, nous n’avons pas besoin de caméras

J’ai déjà abordé la technologie du champ lumineux dans des articles, mais le plus grand changement sera lorsque l’idée de la caméra telle que nous la connaissons tombera dans l’obscurité. Avoir une forme de capture volumétrique 360 haute résolution pourrait très bien renverser complètement les choses.

Imaginez que plutôt que de vous rendre à un emplacement, de configurer votre éclairage, puis de configurer la composition de votre appareil photo, vous configurez plutôt quelques appareils de capture volumétriques. La composition, le mouvement de la caméra et l’éclairage seraient alors entièrement pris en charge dans post.

Nous devons faire attention à regarder des développements comme celui-ci à travers les yeux de notre monde actuel, car actuellement, une telle capture utilise non seulement une énorme quantité de ressources, mais il est difficile de traiter toutes ces données. Mais comme pour tout ce genre de choses, il suffit qu’une entreprise pense à un moyen rapide et pratique de le faire, puis tout change.

Authenticité ?

Ah oui, le mot. Et c’est certainement une préoccupation potentielle. Qu’en est-il de l’habileté de la performance? Qu’en est-il de la sensation d’un lieu réel? Ce sont toutes des choses qui seront discutées à mesure que la technologie sera disponible. Mais il y a une constante qui détermine si cette technologie est utilisée ou non, et c’est l’argent.

Si quelque chose peut être fait de manière assez convaincante et qu’il permet d’économiser de l’argent tout en étant pratique à utiliser, il s’habituera. Les acteurs de premier plan peuvent toujours vouloir donner de vraies performances plutôt que de compter sur un double corps virtuel avec leur visage collé sur le devant, mais pour les acteurs en difficulté, cela pourrait faire la différence entre mettre de la nourriture sur la table ou non.

L’autre problème est qu’une autre force motrice majeure derrière des développements comme celui-ci est la flexibilité et la capacité de faire des choses beaucoup plus facilement qui ne sont tout simplement pas possibles en ce moment.  Mais avec la flexibilité et la capacité de manipuler les choses vient une réelle menace pour l’authenticité. Et il ne s’agit pas seulement de l’idée d’authenticité au sens littéral, non plus. C’est aussi une question de confiance en l’authenticité de la part du public.

Nous allons déjà dans la direction de la méfiance à l’égard de ce que nous voyons. Si de telles données deviennent si faciles à manipuler qu’elles peuvent être effectuées sur un téléphone, nous pourrions rapidement atteindre un point où il est littéralement impossible de faire confiance à ce que nous voyons.

Un exemple pourrait être un politicien qui dit quelque chose. Si des données volumétriques étaient divulguées lors d’une entrevue à un endroit, elles pourraient facilement être recadrées dans un endroit entièrement nouveau, en disant quelque chose de complètement différent. Les métadonnées comme les informations GPS deviennent sans importance dans un tel scénario, alors nous aurions peut-être besoin d’une sorte de système de balises de sécurité.

Lors d’une interview ou d’une apparition devant la caméra, chaque personne dans cette « scène » devrait signer son propre tag de sécurité personnalisé. Une fois que ces images sont prises, elles sont verrouillées sans l’autorisation de chaque personne apparaissant donnant son autorisation numérique de les manipuler. Ces métadonnées seraient rendues lisibles publiquement, de sorte que si une vidéo apparaissait sur quelque forme future de YouTube existe, les téléspectateurs peuvent vérifier s’il existe une signature numérique authentifiée de ceux qui apparaissent. Bien sûr, une telle chose tuerait l’idée de contenu créé par des fans, et cela ne résoudra pas tous les problèmes posés du point de vue du journalisme, mais le fait demeure que nous aurons besoin d’un moyen d’authentifier les choses. Pas seulement pour le bien de ceux qui apparaissent, mais aussi pour garder la confiance de ceux qui regardent.

La blockchain est bien sûr l’un des principaux moyens actuellement étudiés pour restaurer la confiance dans un monde de faux profond, bien qu’aucune solution unique n’ait encore été trouvée.

Peu importe jusqu’où vont les choses, il ne sert à rien de prétendre que le tournage à l’avenir ne sera pas complètement différent de ce qu’il est maintenant. De vastes changements se produiront et certains se sentiront confrontés. Mais on ne peut s’éloigner du fait que, sous une forme ou une autre, ce type de technologie sera transformateur. Et si vous ne pensez pas que cela arrivera, j’ai peur de vous informer que cela en est déjà à ses débuts.