L’entreprise technologique collecte depuis plusieurs années des analyses visuelles du monde et souhaite désormais créer avec celles-ci un système de navigation.
Niantic travaille sur un grand « modèle géospatial » qui pourrait vous aider à naviguer dans le monde physique. C’est ce qu’annonce l’entreprise sur son site. Il s’agit d’un grand modèle d’IA dans le style d’un LLM tel que ChatGPT. Cependant, au lieu de masses de texte, le modèle utilise des analyses du monde réel. Ces millions de scans sont réalisés par les nombreux joueurs de ses jeux mobiles, dont Pokémon Go est probablement le plus connu. Il semble que ce soit la première fois qu’un grand modèle d’IA est formé à partir de jeux mobiles.
Cela se passe ainsi : les participants aux jeux Niantic sont parfois invités à « scanner » des lieux dans le monde, comme un pont, une statue ou un bâtiment important, en les cadrant sous différents angles avec l’appareil photo de leur téléphone portable. Niantic utilise ensuite ces scans pour créer des cartes 3D. « Au cours des cinq dernières années, chez Niantic, nous avons préparé notre « système de positionnement visuel » (VPS). Ce dernier utilise la moindre image d’un téléphone pour déterminer sa position et son orientation sur une carte 3D créée par des personnes qui ont scanné des lieux intéressants dans nos jeux et dans Scaniverse’, déclare-t-on chez Niantic par voie de communiqué.
Navigation
L’idée est qu’un tel VPS puisse interpréter les images sous différents angles et perspectives, et donc savoir également où vous vous trouvez si vous vous trouvez du côté le moins photographié d’une cathédrale par exemple.
Le soi-disant « grand modèle géospatial » (lgm) a été créé à partir de numérisations de plus de dix millions de sites à travers le monde. Beaucoup d’entre eux sont photographiés du point de vue d’un piéton et dans des endroits inaccessibles aux voitures « streetview » plus traditionnelles. Au total, l’entreprise a formé 50 millions de réseaux de neurones, qui devraient permettre la navigation dans un million d’endroits. L’entreprise espère que cette technologie (grâce à des licences, par exemple) pourra contribuer aux applications pour les lunettes AR, la robotique et les systèmes autonomes.
Réalité augmentée
Niantic existe depuis 2010 et crée des jeux de « réalité augmentée », dans lesquels l’action se déroule sur votre écran, mais vous devez voyager dans des endroits du monde physique. L’entreprise est surtout connue pour Pokémon Go, le jeu AR qui permet d’attraper les petits monstres bien connus lors d’une promenade dans un parc ou sur le chemin du supermarché. En plus de ce jeu, Niantic a également sorti Pikmin Bloom (également basé sur une série Nintendo), ainsi que des jeux similaires basés sur Harry Potter et Monster Hunter.
Chacun de ces jeux incluait une forme de numérisation ou de géocartographie. Dans Ingress, le premier jeu de Niantic, cela constituait même une partie assez importante du gameplay. Il n’est donc pas surprenant que l’entreprise lance désormais un modèle de navigation IA. La question est bien sûr de savoir si les nombreux joueurs (souvent jeunes) qui ont réalisé les scans savaient qu’ils y participaient.
