Un élément clé dans le développement des expériences AR est l’identification des entités, avec un système AR efficace capable d’identifier différents objets dans le monde qui vous entoure, afin de fournir un aperçu fonctionnel supplémentaire, superposé à l’écran.
Nous l’avons vu dans le développement de filtres faciaux et d’outils AR dans les applications sociales – plus le système comprend bien le placement des yeux, le mouvement, etc., meilleurs sont les effets à l’écran. Au fil du temps, ces systèmes sont devenus de mieux en mieux capables de répondre à différents éléments – et maintenant Meta a publié un nouveau modèle et un ensemble de données qui pourraient aider à faire passer les choses à l’étape suivante.
Aujourd’hui, nous lançons le modèle Segment Anything Model (SAM), une étape vers le premier modèle de base pour la segmentation d’images.
SAM est capable de segmenter en un clic n’importe quel objet à partir de n’importe quelle photo ou vidéo + transfert sans coup vers d’autres tâches de segmentation
https://t.co/qYUoePrWVi pic.twitter.com/zX4Rxb5Yfo
— Méta IA (@MetaAI) 5 avril 2023
Comme vous pouvez le voir dans le clip ci-dessus, le nouveau ‘Projet « Segment Anything » vise à fournir aux chercheurs et aux développeurs plus de moyens pour aider à identifier les objets dans le cadre.
Selon Meta :
« Nous libérons nos deux généraux Segmenter n’importe quel modèle (SAM) et notre Segment Anything 1-Billion mask dataset (SA-1B)le plus grand ensemble de données de segmentation jamais créé, pour permettre un large éventail d’applications et favoriser la recherche de modèles de base pour la vision par ordinateur.
Le processus, idéalement, fournira plus de capacité pour alimenter les expériences AR, comme indiqué, bien que Meta indique également qu’il aura également une application dans les processus de création d’IA et de VR.
« Nous prévoyons que la conception de systèmes composables, rendue possible par des techniques telles que l’ingénierie rapide, permettra une plus grande variété d’applications que les systèmes formés spécifiquement pour un ensemble fixe de tâches, et que SAM peut devenir un composant puissant dans des domaines tels que AR/VR, création de contenu, domaines scientifiques et systèmes d’IA plus généraux.
L’ensemble de données pourrait être utilisé de différentes manières, et cela pourrait être un grand pas en avant pour aider au développement plus large de modèles AR – tandis que pour Meta en particulier, cela pourrait aider à développer son projet de lunettes intelligentes Project Aria, qui pourrait ou n’ont peut-être pas été mis de côté en raison de réductions d’effectifs au sein de l’application.
En juin dernier, The Information a rapporté que Meta avait retardé la sortie prévue de ses lunettes AR dans le cadre de mesures plus larges de réduction des coûts au sein de l’entreprise. Selon le rapport, Meta a choisi de supprimer la première itération de ses appareils portables AR, qui devaient arriver sur le marché l’année prochaine, en faveur de la concentration sur la deuxième génération de son appareil AR, qui n’a désormais aucune date de sortie dans le cadre.
Meta, bien sûr, a lancé ses lunettes intelligentes «Ray Ban Stories» en 2021, qui semblaient être un précurseur de sa prochaine poussée dans les wearables AR – qui, à l’époque, semblaient également arriver bientôt. Mais des conditions économiques plus difficiles et son énorme investissement dans le métaverse semblent avoir fait dérailler le plan, qui a maintenant vu ses ambitions portables mises en veilleuse, au moins dans une certaine mesure.
Nous ne savons pas à quel point ce projet a été retardé, mais ce nouvel ensemble de données semble indiquer son développement en cours sur ce front, qui pourrait voir la sortie d’une autre version de ses lunettes intelligentes dans le futur.
Nous ne savons tout simplement pas quand, et avec la réalité virtuelle restant son principal objectif d’investissement et l’IA générative entrant maintenant dans le cadre, il semble que la réalité augmentée ait été le grand perdant dans l’allocation des ressources, sur plusieurs des grandes plates-formes technologiques.
Mais peut-être, ça vient. Peut-être que des développements comme celui-ci pointent vers cette prochaine étape, où des expériences AR complètes, interactives et engageantes deviendront bientôt une réalité – ou peut-être que tout est prêt à être lié à la réalité virtuelle et à fusionner vos expériences réelles et en ligne dans un processus plus immersif.
Quoi qu’il en soit, il s’agit d’un développement intéressant, et la publication de l’ensemble de données pourrait aider la communauté des développeurs au sens large à créer des expériences de nouvelle génération.
Vous pouvez en savoir plus sur le projet Segment Anything de Meta ici.
