Je reviens d'une exposition interactive sur le Deep Fake dans les arts, organisée dans les pavillons de l'Université Polytechnique de Lausanne (EPFL). Cette institution suisse, qui a développé en 2019 la technologie permettant de reconnaître les deepfakes «humains», est un leader mondial dans le domaine de la science et de la technologie. Il veut nous aider à comprendre l’avenir de la technologie dans l’art.
Le thème est très actuel ; le numérique vous permet de créer des contrefaçons artistiques presque impossibles à distinguer de l'original. Mais cela permet aussi d'utiliser des œuvres loin de leurs lieux d'origine, pour contourner des problèmes politiques ou sécuritaires. Et c’est sur cela que se sont concentrés les organisateurs, pour évaluer la capacité d’une copie à susciter des émotions durables dans le temps.
Les outils de la technologie dans l'art
Dans une exposition moderne, l'interactivité est primordiale. Pendant des années, j'ai soutenu le "musée", entendu comme de grandes salles/parkings d'objets, qui dans la plupart des cas sont morts. Les exceptions sont certains chefs-d'œuvre qui attirent encore des milliers, voire des millions d'experts et de curieux en raison de leur renommée, mais ce n'est pas la norme. En Suisse, plus de 75% des musées n'atteignent pas 5'000 visiteurs par an. Mais même en Italie, la fréquentation a augmenté ces dernières années (hors période pandémique). Cela suggère que nous allons dans la bonne direction pour moderniser le service offert.
Les outils utilisés pour ajouter de la technologie au monde de l'art sont principalement les écrans tactiles, les hologrammes, la réalité mixte, augmentée et virtuelle.
Projection 3D multi-vues ou multi-visionneuses
Mea culpa, je ne connaissais pas de technologie intéressante : la projection multi-vues 3D, ou multi-visionneuse. Le fonctionnement est simple sur le papier, bien que techniquement complexe en raison de l'énorme quantité de données à traiter. Un vidéoprojecteur, en particulier le Insight 4K HFR 360 (un jouet d'une valeur de plus de 300 000 $), projette 360 images par seconde en résolution 4K. Ce framerate exceptionnel, combiné à des lunettes 3D actives (évidemment synchronisées avec ce framerate), permet la lecture simultanée de 3 vidéos stéréoscopiques différentes, fournissant 60 ips à chaque œil.
Je l'ai essayé et, mis à part l'inconfort intrinsèque du port de lunettes actives pour un porteur de lunettes "normal" comme moi, la vision est parfaite.
Pour améliorer encore la situation, 6DOF (avec six degrés de liberté, il comprend où l'on regarde et où l'on se trouve dans la pièce). Système similaire, sinon identique, à ceux utilisés pour les visionneuses HTC Vive VR (ou les anciens Oculus). En termes simples, la vidéo 3D change de perspective à mesure que nous nous déplaçons dans la pièce, pour obtenir l'effet de « voir derrière » les objets projetés. Un changement de parallaxe, copié de la réalité virtuelle. Et là aussi, une belle façon d’ajouter de la technologie à l’art.
Une note sur le protagoniste : la numérisation avec des techniques laser et scanner de l'Abbazia di Monte San Michele a Bamberg (Allemagne). Fermé en 2012 pour être restauré suite à de graves dégâts structurels, il peut donc être visité virtuellement.
Photogrammétrie 3D automatique avec CultArm3D
Dans un monde de plus en plus automatisé, où les humains sont de moins en moins nécessaires (vous pensez que c'est un problème ?), il n'est plus impressionnant de voir un bras robotique photographier un masque au loin pour le recréer en 3D. Il s'agit du CultArm3D.
Il s'agit spécifiquement d'une reproduction 3D du masque de samouraï de la période Edo. Et c’est le premier scanner au monde capable de produire une copie 3D parfaite grâce à la photogrammétrie 3D automatique. Réalisé par des recherches à l'Institut Fraunhofer d'infographie, à Darmstadt (Allemagne), il est capable de calculer les dimensions de l'objet, de le scanner (même dans le cas de matériaux réfléchissants), de le recréer en temps réel en couleur 3D et donc d'être utilisé de manière virtuelle ou augmentée. réalité, ou imprimé.
L'impression 3D réaliste est possible grâce au développement de l'impression 3D couleur adaptative. Dans ce cas précis, les technologies de la société israélienne Stratasys sont utilisées. Le tout avec un objectif déclaré : montrer des œuvres anciennes sans risquer de ruiner les originaux.
À mon avis, bien mais pas très bien... Il manque de la poésie dans un objet comme celui-ci, et je ne sais pas combien de gens la remplaceraient par le véritable original. Il n'en reste pas moins que, dans d'autres cas que l'impression, une telle machine permet un gain de temps considérable pour la numérisation du patrimoine culturel mondial (et en Italie, il y a beaucoup à faire).
L'intelligence artificielle nous met en garde
C'est ce que l'on imagine pour la première fois lorsqu'on pense à l'avenir de la technologie dans l'art. Belle, et en même temps un peu terrifiante, Trust AI nous invite à nous asseoir devant elle, à enlever notre masque pour qu'elle puisse mieux voir et répondre à ses questions.
Son visage est un hologramme, il nous informe de nos données personnelles (âge, sexe, couleur de cheveux) et pirate progressivement notre visage jusqu'à ce qu'il prenne notre apparence. Dans son discours, après avoir « volé » notre personnalité, il tient à nous mettre en garde sur les données que nous partageons en ligne ; comment ceux-ci peuvent être utilisés à des fins moins nobles par des personnes mal intentionnées.
L'intelligence artificielle est-elle source de dangers ? Certes oui, mais pas plus que bien d’autres innovations technologiques. Et des installations artistiques comme celle-ci aident le public à comprendre comment cela fonctionne, afin qu'il puisse mieux se défendre.
L'œuvre a été réalisée par Bernd Lintermann et Florian Hertweck chez ZKM | Hertz-Lab, en réponse à la propagation inquiétante des deepfakes. Je vous invite à lire le long article dans lequel ils décrivent le projet ; c'est vraiment intéressant.
Réalité augmentée pour visiter les monuments historiques
Beau, amusant pour les enfants, mais à part ça, visiter une grotte reproduite en 3D, visualisée en réalité augmentée avec un iPad à la main, je ne pense pas que ce soit la meilleure façon d'utiliser la technologie dans l'art. Je trouve cela inutile, un pur exercice de style ; Je n'en veux pas aux créateurs qui ont été vraiment exceptionnels.
Attention, nous parlons de l'une des grottes de Mogao, près de la ville de Dunhuang (Chine) datant de la Dynastie Tang. Donc quelque chose de très ancien mis en danger par l’excès du tourisme. Les représentations numériques sont les bienvenues, mais c’est 100 % du domaine de la réalité virtuelle : une « intrusion » de RA ne produit pas les mêmes résultats.
Pour commencer, il est difficile de tenir la grande tablette. Et puisque tout est reconstruit en 3D, pourquoi ne pas profiter de la VR pour vraiment s'y sentir, et ne pas marcher dans un cube noir aux textures blanches dessinées sur le mur ?
La réalité augmentée peut vraiment faire beaucoup pour améliorer la qualité d'une visite touristique, mais sur place réelle. On peut s'aider d'un iPad pour reproduire des scènes de vie du passé, des légendes, des vidéos descriptives d'un point particulier... Mais une simple visite virtuelle, faisons-le bien.
La réalité augmentée qui nous fait réfléchir
Dès l'entrée dans l'exposition, deux œuvres attisent la curiosité. Le « Pan Reclinato » dont nous parlerons prochainement est un piédestal blanc isolé. C'est la base de « Le veau d'or » par Jeffrey Shaw. Un veau qui ne prend forme qu'en pointant l'objet avec un iPad qui, grâce à la réalité augmentée, le reproduit.
L'importance du Golden Calf est très claire quand on pense à l'année de production : 1994. Shaw était un véritable pionnier dans le monde de la réalité augmentée, et évidemment dans sa forme originale il n'y avait pas un iPad mais un écran équipé d'un suivi de mouvement magnétique Polhemus, l'une des très rares entreprises à proposer cette technologie au moment fin du siècle dernier.
L'effet le plus intéressant sont les reflets sur le mollet. Quatre caméras placées sur les côtés du socle reproduisent notre image sur le sujet pour lui donner cette touche supplémentaire de réalisme. Et faire en sorte que l’œuvre soit toujours différente, vouloir faire du spectateur lui-même un co-auteur. Et le veau, insaisissable, est l'objet de nos désirs.
L'impression 3D pour la protection de la sculpture
Le « Pan Reclinato » est la copie moderne d'une copie ancienne. L'œuvre originale est attribuée au sculpteur florentin Francesco Da Sangallo, réalisée vers 1535. Il s'agissait à son tour d'une copie dont l'original a cependant été perdu.
L'artiste contemporain Oliver Laric en a réalisé un scan 3D (téléchargeable gratuitement sur Three D Scans), puis en l'imprimant dans de nombreux matériaux différents. Le résultat est une œuvre nouvelle, moderne et provocante. Elle questionne la véracité du post-original à l’ère moderne, rejetant le postulat de la singularité de l’art et de sa propriété privée.
Laric, pour son travail populaire, a mis à disposition gratuitement de nombreuses œuvres numérisées en 3D à tous ceux qui souhaitent les télécharger à partir du site Web Three D Scans.
De nouvelles voies pour l'avenir de la technologie dans l'art
Je n'ai pas décrit ici toutes les œuvres, qui étaient plus de 20. Je voulais parler de celles qui nous font surtout réfléchir sur les changements que la technologie apporte au monde de l'art. En plus de ceux-ci, il convient également de mentionner la blockchain qui a été représentée ici par l'œuvre multimédia « 89 secondes pour Alcázar», de Eve Sussman. Des vidéos dont les droits étaient répartis en 2 304 « atomes » de 20 × 20 pixels, et vendus via la blockchain. Et dont la reproduction à l'EPFL était pleine de trous, puisque certains propriétaires d'atomes n'acceptaient pas une visualisation publique gratuite.
Un avenir radieux, dans lequel le domaine public jouera un rôle de plus en plus important. Mais en même temps, un avenir où les artistes auront de plus en plus de moyens d'expérimenter leurs créations, de les diffuser à travers le monde.
Où il sera plus facile d'organiser des expositions d'art thématiques, même dans de petits espaces, sans les coûts énormes liés au transport d'œuvres de grande valeur.
Dans lequel les spectateurs pourront admirer et étudier des œuvres d'art du monde entier et de toutes les époques, sans avoir besoin de parcourir des milliers de kilomètres. Ce qui est bien sûr magnifique. Mais parfois, et pour certains, impossible.