Prends une photo et je te dirai où tu es : le nouveau "pouvoir" surprenant de l'intelligence artificielle
Nous sommes désormais habitués aux prouesses de l'intelligence artificielle, qui a ouvert la voie à des possibilités jusqu'alors inexplorées. Aujourd'hui, un nouveau projet a mis en évidence ses capacités alarmantes en matière de géolocalisation. Voyons ce qu'il en est.
Du jeu à la réalité : le programme d'IA qui découvre où vous avez pris une photo
Pixabay
L'intelligence artificielle franchit des frontières de plus en plus incroyables et passionnantes. Après le système conçu pour lire les pensées et les traduire en textes écrits, c'est maintenant au tour d'un projet concernant les images. Où que vous soyez dans le monde au moment où vous prenez une photo, l'intelligence artificielle peut découvrir l'endroit précis. Cela a été démontré par le projet d'un groupe d'étudiants diplômés de l'Université de Stanford, en Californie, aux États-Unis. Lukas Haas, Michal Skreta, Silas Alberti et Chelsea Finn se sont lancés dans la présentation des incroyables capacités de géolocalisation de l'IA avec PIGEON, Predicting Image Geolocations. Initialement, le programme avait été conçu pour localiser les positions sur Google Street View pour GeoGuessr, un célèbre jeu en ligne de géographie où les joueurs doivent deviner les positions à partir des images de Google Street View.
Cependant, PIGEON s'est révélé étonnamment efficace pour identifier avec précision même les photographies prises à un endroit donné. Les anciens étudiants de Stanford ont conçu un lecteur d'intelligence artificielle pour le jeu, utilisant l'outil d'analyse d'images CLIP d'OpenAI. Ensuite, ils l'ont entraîné à reconnaître les lieux représentés par les images, en utilisant un ensemble d'environ 500 000 images de Google Street View. À ce stade, PIGEON a fait le reste, parvenant à découvrir avec une extrême précision l'endroit dans 95% des cas.
PIGEON et vie privée : préoccupations à ce sujet
RAINBOLT/Youtube screenshot
La capacité de PIGEON a été testée par Trevor Rainbolt, un joueur expert de GeoGuessr qui a réussi à identifier même l'emplacement d'un arbre photographié dans l'Illinois. Rainbolt a défié le programme d'IA et a perdu, pour la première fois, la compétition : c'est parce que PIGEON est capable de détecter même les plus petits détails, tels que le terrain, la forme et la couleur des feuilles, les caractéristiques du ciel. Malgré les capacités extraordinaires offertes par l'intelligence artificielle, ses capacités suscitent souvent des interrogations et des débats liés à une utilisation dépourvue de bon sens de cet outil.
Dans ce cas également, les doutes n'ont pas manqué : l'analyste politique de l'American Civil Liberties Union, Jay Stanley, a soulevé des inquiétudes concernant une éventuelle surveillance des entreprises et une surveillance gouvernementale, abordant également la délicate question du harcèlement. C'est parce que, naturellement, être capable de localiser précisément l'endroit où une photo est prise peut compromettre la vie privée individuelle et révéler des informations que la personne ne souhaite pas divulguer.
Cependant, à quelques erreurs négligeables près, le modèle a réussi à démontrer que l'intelligence artificielle a un pouvoir indéniable en ce qui concerne la géolocalisation.
L'intelligence artificielle découvre l'endroit où vous avez pris une photo : attention à l'arrière-plan
Pexels
Pour éviter les éventuels dangers liés à la vie privée, l'analyste suggère de faire attention aux détails qui apparaissent en arrière-plan de nos photos, car la géolocalisation de l'intelligence artificielle deviendra de plus en plus sophistiquée et puissante. Les auteurs du projet ont également cherché à limiter ces éventuelles conséquences en publiant un article sur la technique utilisée sans rendre la technologie publique. "La géolocalisation des images à l'échelle mondiale reste un défi en raison de la diversité des images provenant de n'importe quelle partie du monde. Bien que les approches basées sur les transformateurs de vision aient fait des progrès significatifs dans la précision de la géolocalisation, le succès dans la littérature précédente est limité à des distributions restreintes d'images de points de repère et les performances ne se sont pas généralisées à des endroits invisibles", indique leur étude.
"Nous présentons un nouveau système de géolocalisation qui combine la création de géocellules sémantiques, un pré-entraînement contrasté multi-tâches et une nouvelle fonction de perte. Nous formons deux modèles pour l'évaluation des données au niveau de la rue et la géolocalisation d'images à des fins générales ; le premier modèle, PIGEON, est formé sur les données du jeu Geoguessr et peut placer plus de 40 % de ses hypothèses dans les 25 kilomètres de la position cible à l'échelle mondiale. Nous développons également un bot et utilisons PIGEON dans une expérience en aveugle contre les humains, nous classant dans le top 0,01 % des meilleurs joueurs. Nous défions ensuite l'un des joueurs professionnels de Geoguessr les plus importants au monde dans une série de six parties avec des millions de spectateurs, remportant toutes les six parties."
Les résultats sont sans aucun doute impressionnants. Que pensez-vous de ce projet à la fois fascinant et inquiétant ?
