9 interactions entre la culture et l’IA

Quand art et technologie ne font qu’un

Depuis 2018, le Lab de Google Arts & Culture explore l’intégration de l’intelligence artificielle (IA) et du Machine Learning (ML) dans l’univers artistique et culturel. À l’instar d’autres technologies émergentes et innovantes, l’IA s’appréhende à la fois comme un outil et comme un partenaire. En effet, elle permet aux artistes, aux ingénieurs et aux institutions culturelles d’accéder à une multitude de possibilités dans le cadre du processus créatif, de relever certains défis ou de trouver de nouvelles façons d'engager les publics.

La plupart de nos partenariats avec le monde culturel sont le fruit d’interrogations singulières. Est-il possible d’entendre les couleurs ? Comment les archives d’un artiste peuvent-elles son processus créatif ? Peut-on trouver son sosie dans un musée ? Comment représenter la crise climatique ? Comment transmettre le goût du chant lyrique à la génération Z ? Comment les conservateurs de musée peuvent-ils reconstituer des œuvres perdues ?

Ces questions guident nos travaux depuis plusieurs années. Pour tenter d’y apporter une réponse, nous avons développé des expériences dans lesquelles l’IA joue un rôle essentiel.

Voici neuf projets pour illustrer notre réflexion sur le rôle de l'IA dans l'art et la culture.

L’IA pour relever les défis de préservation culturelle

Parmi les 7000 langues vivantes dans le monde, plus de 3000 sont menacées de disparition. Woolaroo, un outil en open source, aide les communautés concernées à préserver leur langue . Cette plateforme regroupe aujourd’hui 17 langues, dont le créole louisianais, le māori, le nawat, le tamazight, le sicilien, le zhuang, le rapanui ou le yiddish. Grâce à une technologie de reconnaissance des objets fondée sur l’IA, Woolaroo identifie ce qui se trouve dans le champ d’une caméra en cherchant des correspondances au sein d’une liste de termes en constante évolution. En savoir plus.

Chercheuses, curatrices, femmes de science ne reçoivent souvent pas la reconnaissance et le crédit appropriés pour leur travail essentiel. C'est pour cela que nous avons conçu, en partenariat avec les conservatrices du Smithsonian, des modèles d'apprentissage automatique capables de déceler de nombreuses avancées scientifiques dues à des collaboratrices de l’institution dont il était difficile de retracer l'histoire dans les archives officielles jusqu'à présent. Grâce à ces outils, les conservateurs et les spécialistes des données peuvent produire des analyses et des représentations à grande échelle, reposant sur près de deux siècles de données culturelles. En savoir plus.

Trois chefs d’œuvre de Klimt (La Philosophie, La Médecine, La Jurisprudence) ont été détruits lors de la Seconde Guerre mondiale. De ces « peintures des Facultés », il ne reste que des photographies en noir et blanc et des articles descriptifs. Nous avons travaillé en étroite collaboration avec des experts de Klimt au sein du musée du Belvédère de Vienne pour développer une hypothèse de reconstitution numérique aussi fidèle que possible de ces œuvres, grâce à l’Apprentissage Automatique. En savoir plus.

Ce ne sont là que trois des nombreux projets visant à résoudre des problèmes auxquels nos partenaires culturels sont confrontés. L’IA permet d’autres applications : l’identification d’œuvres apparaissant sur de vieilles photographies du MOMA, l’analyse d’ensembles de données du LIFE Magazine numérisées, ou encore la présentation des archives visuelles de la NASA de manière accessible, interactive et surprenante.

L’IA pour interagir de manière inédite avec la culture en ligne

Blob Opera est une expérience divertissante fondée sur l’IA qui transpose vos idées musicales en harmonies lyriques (pas besoin de savoir chanter). Pour créer cet outil, nous avons collaboré avec quatre chanteurs lyriques professionnels pour entraîner un « réseau neuronal ». Concrètement, nous avons entraîné l’algorithme à chanter et à produire des harmonies avec quatre types de voix. La synthèse vocale, un domaine de l'IA qui se concentre sur la manière dont les ordinateurs peuvent modéliser le chant humain, a permis un rendu fluide et réaliste . Blob Opera est un outil numérique accessible à tous, quelle que soit ses aptitudes musicales, qui a déjà été utilisé dans plusieurs contextes y compris par des professeurs de musique ainsi que des artistes professionnels et amateurs. En savoir plus.

Art Selfie propose une découverte nouvelle et originale dans les collections des musées, en identifiant des portraits qui ressemblent au vôtre, quelque part dans le monde. À partir d’un selfie, un modèle d’AA compare votre photo avec les visages au sein d'œuvres d'art partagées par nos musées partenaires. En quelques instants, il vous partage des résultats ainsi qu’un pourcentage de correspondance avec chaque portrait proposé. Il suffit ensuite de cliquer sur l’un d’entre eux pour découvrir l’œuvre et son auteur, dont vous n’avez peut-être jamais entendu parler. En savoir plus.

Et s’il était possible d’entendre les couleurs? Nous avons collaboré avec le Centre Pompidou pour concevoir une exploration synesthésique de l’œuvre de Vassily Kandinsky. On y découvre une représentation « musicale » de son chef d’œuvre, Jaune-rouge-bleu, élaborée grâce à l’IA. Chacun peut désormais, et probablement pour la première fois, connaître la possible « sonorité » d’un Kandinsky en « écoutant une peinture ». En savoir plus.

D’autres projets visent à créer des liens entre l’art et un nouveau public. Par exemple, l’outil Giga Manga aide les utilisateurs à créer des personnages de mangas grâce à l'Apprentissage Automatique. Il suffit de tracer quelques lignes et d’ajouter quelques couleurs, puis de laisser le modèle faire le reste. Et pour faire suite au succès de Art Selfie, nous avons conçu Art Transfer et Pet Portrait.

L’IA pour accompagner les artistes dans leur processus de création

Living Archive est un outil chorégraphique fondé sur l’IA et conçu en collaboration avec Wayne McGregor. Il se sert des anciennes chorégraphies de l’artiste pour créer des mouvements originaux et nouer un dialogue entre des danseurs et 25 ans d’archives. Living Archive est accessible ici.

POEMPORTRAITS est un projet collaboratif en ligne initié par Es Devlin, Ross Goodwin et le Lab Google Arts & Culture. Il permet aux utilisateurs de créer des poèmes grâce à l’IA. Cette plateforme accessible en ligne fait également partie de l’exposition AI: More than Human au Barbican Centre. En savoir plus.

À quoi pourraient ressembler des jardins conçus par des insectes pollinisateurs ? Le projet Pollinator Pathmaker, mandaté par le complexe environnemental britannique Eden Project de Cornwall, en collaboration avec l’artiste Alexandra Daisy Ginsberg, est une œuvre unique. Elle permet de créer, à l’aide d’un algorithme, des jardins destinés aux espèces menacées d'abeille et de papillons.

En outre, depuis 2019, nous explorons les possibles applications artistiques de l’intelligence artificielle en accompagnant le travail d’artistes qui utilisent l’apprentissage automatique dans leur processus créatif. Cette aide a permis à des artistes du monde entier de collaborer avec des technologues de Google pour inclure l’apprentissage automatique dans la création d’œuvres cinématographiques, poétiques, sonores et narratives interactives.

Nous continuerons d’étudier les possibilités que présente l’IA en tant que passerelle entre l’art et la technologie, beaucoup de projets sont en cours et l’intelligence artificielle générative ouvre de nouveaux horizons.