Snapchat transforme le monde réel en chasse au trésor AR avec reconnaissance d’objets quasi instantanée «Mobile AR News :: Next Reality


Alors que Snapchat n’est pas étranger aux chasses au trésor basées sur la localisation, le nouveau jeu orienté monde de l’application ajoute une certaine compréhension environnementale au mélange.

Cette semaine, Snapchat a lancé un nouveau jeu Snappables baptisé Scavenger Hunt. Cependant, alors que la plupart des jeux Snappables utilisent la caméra frontale pour insérer des utilisateurs et leurs amis dans le jeu, Scavenger Hunt retourne le gameplay à la caméra arrière.

Le but du jeu est de permettre aux utilisateurs de trouver huit objets du monde réel – une bouteille, une voiture, une assiette, une tasse, un smartphone, une télévision, une montre et une chaise – dans leur environnement à l’aide de la caméra de leur smartphone. En récompense de la recherche de chaque objet, l’application personnifie chaque objet en vue avec un visage souriant et des bras AR animés. Les joueurs qui trouvent les huit types d’objets déverrouillent un objectif selfie spécial "Chasseur héroïque".

Images de Tommy Palladino / Next Reality

Le jeu fonctionne à l’aide d’une fonctionnalité de reconnaissance d’objets en temps réel qui peut identifier des objets de tous les jours, tels que des tasses, des appareils mobiles et des automobiles. Une fois que l’objet cible est détecté dans la vue de la caméra, le modèle de vision par ordinateur estime la taille et la position de l’objet, ce qui permet à l’application d’ancrer le contenu AR sur l’objet.

En termes de performances réelles, la reconnaissance d’objets peut être rapide comme l’éclair et très précise. Au cours de nos tests, dans la plupart des cas, l’application a identifié l’objet dès que l’objet cible était en vue. Le plus impressionnant a peut-être été la reconnaissance de la voiture, qui a d’abord pu repérer une voiture garée derrière des buissons, puis a commencé à suivre une voiture en mouvement au passage!

Images de Tommy Palladino / Next Reality

Dans d’autres cas, la tasse et le téléphone ont nécessité un peu plus de travail pour trouver le bon angle, tandis qu’une montre intelligente avec une forme et un cadran de montre assez traditionnels n’a pas passé le test pour être reconnue comme une montre. Cependant, c’est ici que j’ai découvert qu’une simple image d’une montre était suffisante pour satisfaire l’objectif.

Les capacités d’ingénierie de vision par ordinateur de Snap sont à l’origine de sa technologie de réalité augmentée, remontant jusqu’à la reconnaissance faciale dans son outil d’objectifs d’origine pour la caméra frontale.

(1) J’ai rencontré des difficultés pour trouver le téléphone lorsqu’il était connecté. (2) Mais, une fois tenu à la main, tout était rad. Images de Tommy Palladino / Next Reality

Au cours des dernières années, cependant, les ambitions de vision par ordinateur de Snap se sont davantage concentrées sur la compréhension de l’environnement, ajoutant la capacité interactive aux images et aux objets dans le monde réel. En 2018, Snap a introduit Visual Search, qui a permis aux utilisateurs de reconnaître des objets et de récupérer des informations sur les produits à partir de l’inventaire Amazon. L’année dernière, la société a renommé la fonctionnalité "Scan" dans le cadre de sa barre AR redessinée, car ses capacités de reconnaissance d’image et de reconnaissance ont été un succès auprès d’annonceurs comme Nike et HBO.

(1) Cette montre intelligente ne ressemble apparemment pas à une montre. (2) Cette photo d’une montre, cependant, marque la victoire !, (3) J’ai été récompensé par le titre de chasseur héroïque. Et je n’ai même pas eu à sortir. Images de Tommy Palladino / Next Reality

Alors que ses objectifs orientés vers l’avant offrent du plaisir pour l’ère du selfie, les capacités orientées vers le monde sont ce qui a ouvert la voie à l’éventuelle incursion de Snap dans les lunettes intelligentes, qui a officieusement commencé avec la gamme de caméras 3D dans Spectacles 3.

Avec la capacité de reconnaître des images, des points de repère et des types d’objets sous sa ceinture, Snap a maintenant une bonne base pour un logiciel qui peut fournir une compréhension environnementale pour les lunettes intelligentes qui, plus tard, peuvent réellement remplacer les smartphones pour l’informatique quotidienne.

Ne manquez pas: NR30: les 30 personnes de Next Reality à surveiller en réalité augmentée pour 2019