Casque HoloKit X AR pour iPhone : prix, fonctionnalités, date de sortie

Julien Chokkattu

Si vous avez besoin de preuves qu'Apple travaille sur un casque de réalité mixte, faites un tour avec le HoloKit X. Créé par Botao Amber Hu, un développeur qui a travaillé dans des entreprises comme DJI, Google et Twitter et est maintenant PDG et fondateur de Holo Interactive, ce casque s'appuie entièrement sur les capacités existantes de l'iPhone pour créer des expériences de réalité augmentée mains libres interactives. C'est une vitrine puissante de ce qui est possible si Apple fabriquait un casque en utilisant la technologie déjà intégrée dans son smartphone.

Un tel casque sortant de Cupertino coûterait presque certainement plus de mille dollars. (C'est Apple, après tout.) Regardez le nouveau casque de réalité mixte de Meta pour référence ; ça commence à 1 499 $. Les casques de la plate-forme XR de Microsoft coûtent entre 600 et 1 000 dollars. Ces prix élevés sont la raison pour laquelle le HoloKit X existe. Hu, qui s'intéresse depuis longtemps à l'informatique du futur et à l'art des nouveaux médias, dit vouloir "démocratiser" le monde de la réalité mixte. En tant que tel, le HoloKit X coûte 129 $, et tout ce dont vous avez besoin est un iPhone récent (à l'exception des modèles iPhone Mini et iPhone SE) pour l'alimenter.

Le HoloKit X est un casque en plastique avec des lentilles optiques à l'intérieur. Il n'y a pas de technologie ici (sauf pour un capteur NFC, mais plus à ce sujet plus tard). Pensez-y simplement comme un spectateur, un peu comme les View-Masters de la vieille école. Semblable aux casques de réalité virtuelle mobiles comme Google Cardboard, l'ensemble AR de Lenovo pour les jeux Star Wars ou l'ancien Google Daydream, vous devez monter un iPhone sur le HoloKit X.

Contrairement aux casques VR, vous ne regardez pas un écran. L'iPhone est monté et loin de vos yeux. Au lieu de cela, vous regardez à travers la vitre dans un champ de vision de 60 degrés et pouvez voir le monde physique ainsi que les personnes qui vous entourent. L'écran de l'iPhone, tout en utilisant les caméras arrière pour gérer ces expériences AR, est reflété en vision stéréoscopique sur les lentilles, ce qui vous permet de voir efficacement des objets 3D virtuels intégrés dans le monde réel.

Ce que vous pouvez faire exactement avec le HoloKit X est actuellement limité. Il n'y a qu'une poignée d'expériences - ce que Hu appelle des "réalités" - dans l'application HoloKit, dont l'une est un jeu de duel multijoueur où vous lancez des sorts sur un ennemi. Les visuels sont clairs, colorés et assez nets, et la plate-forme prend en charge six degrés de liberté via le framework ARKit d'Apple. Pour cette raison, vous pouvez déplacer des objets virtuels et ils resteront ancrés dans les endroits du monde réel où vous les positionnez. Et lorsque vous jouez à un jeu, vous pouvez même vous baisser pour esquiver les explosions. L'« ennemi » peut être une autre personne utilisant un HoloKit X dans un espace partagé, un personnage virtuel ou même un personnage contrôlé par quelqu'un avec juste un iPhone.

Puisqu'elle est entièrement alimentée par un iPhone, l'application HoloKit tire parti des technologies existantes. La possibilité de jouer à un jeu avec d'autres utilisateurs de HoloKit X, par exemple, ne repose pas sur les données cellulaires ou le Wi-Fi, mais plutôt sur la technologie de réseau local qui alimente AirDrop. C'est également ce qui alimente "Spectator View", qui permet à quiconque d'utiliser un iPhone et l'application HoloKit pour visualiser votre expérience de réalité augmentée en temps réel en pointant son téléphone vers la scène. (Vous pouvez enregistrer et partager cela sur les réseaux sociaux, ou le diffuser via AirPlay sur un téléviseur pour que d'autres puissent le voir.) Hu dit que Holo Interactive travaille également sur un mode Marionnettiste qui permettrait à quelqu'un d'autre de diriger votre expérience AR.

Il existe plusieurs façons d'interagir avec l'expérience de réalité augmentée. L'application HoloKit utilise la technologie de cadre Vision d'Apple pour identifier et suivre votre main. Je n'ai pas vu de démonstration de cela, mais l'idée est que vous pouvez simplement utiliser vos mains pour interagir avec des objets et les caméras de l'iPhone reconnaîtront les mouvements de vos mains. Hu dit que HoloKit prend également en charge tout appareil Bluetooth pouvant se connecter à l'iPhone, comme les contrôleurs PlayStation.

Ce que j'ai fait en démonstration, c'est la possibilité d'utiliser le gyroscope d'une Apple Watch comme contrôleur de mouvement, tout comme une Wiimote. Hu a attaché une Apple Watch à mon poignet (cela fonctionne avec Watch Series 4 et plus récent) avec l'application de montre HoloKit installée et en cours d'exécution, et m'a donné une baguette uniquement pour que je puisse avoir l'impression de l'utiliser pour lancer des sorts. Et voilà, j'étais capable de lancer des sorts avec de simples gestes ou un coup de poignet. Je pouvais même pointer ma baguette vers le bas pour charger une barre de charge et déclencher un sort plus puissant. L'utilisation de l'audio spatial via l'un des écouteurs d'Apple prenant en charge cette fonctionnalité facilite l'immersion, de sorte que vous pouvez entendre un sort passer devant votre oreille droite. La vibration haptique de l'iPhone ajoute une autre couche d'entrée sensorielle, mais comme le téléphone est monté dans le casque, il ne vibre que près de votre front, vous ne pouvez donc pas le sentir immédiatement.

Vous pouvez utiliser l'HoloKit X avec un iPhone XS, XS Max, iPhone 11, iPhone 11 Pro et 11 Pro Max, iPhone 12, iPhone 12 Pro et 12 Pro Max, iPhone 13 et iPhone 13 et 13 Pro Max, iPhone 14, et iPhone 14 et 14 Pro Max. (Vous devrez retirer votre étui pour qu'il s'adapte.) Vous obtiendrez la meilleure expérience avec un iPhone doté d'un capteur lidar, qui est devenu un incontournable sur les modèles Pro, à commencer par la série iPhone 12.

Lauren Goode

Julien Chokkattu

Personnel filaire

L'application de duel n'utilise pas le capteur lidar, mais il existe une autre expérience AR qui présente des objets virtuels remplissant un espace et interagissant avec des objets et des personnes. Le capteur lidar aide le téléphone et l'application à détecter votre environnement, et le moteur neuronal des processeurs de l'iPhone aide à la détection des objets et des personnes.

Ce qui est vraiment impressionnant, c'est à quel point HoloKit X est confortable à porter. Il est même assez stylé, ressemblant à un chapeau à visière. Il y a une bande en peluche que vous pouvez serrer sur votre tête pour la garder bien ajustée, et ces bandes sont interchangeables, mais j'ai été plus impressionné que le casque n'interfère pas du tout avec mes lunettes. Jetez une touche de couleur sur le tout, et je pourrais le voir comme un gadget tout droit sorti d'une émission de science-fiction comme Cowboy Bebop. La seule technologie dans le casque est un capteur NFC, qui, selon Hu, peut être utilisé pour suivre des données anonymes, comme quel appareil se trouve dans le casque et quelles applications AR ont été les plus utilisées.

Le matériel est définitif, mais l'application HoloKit est encore en version bêta contrôlée. Vous pouvez acheter un casque dès maintenant, mais vous n'aurez accès qu'à une version TestFlight de l'application HoloKit. . Et construire les bonnes Réalités est le point crucial.

"L'application qui tue pour StAR [Stereoscopic AR] n'a pas encore été créée", a déclaré Hu. « Tout le monde attend Apple ou Meta, mais pour quoi ? Tout le monde parle du matériel, mais personne ne parle de l'application. Tout le monde parle de la production d'ouvriers ou de l'armement des soldats. à propos de mettre des notifications sur votre visage, mais c'est une Apple Watch, nous l'avons déjà."

Lauren Goode

Julien Chokkattu

Personnel filaire

Hu dit que son entreprise ne publiera pas de kit de développement logiciel pour le moment. Au lieu de cela, son équipe d'experts en logiciels, qui ont une formation en création de contenu et en nouveaux médias, créera les réalités initiales, en particulier parce qu'elles utilisent tellement de nouvelles technologies qu'il est difficile d'éduquer les autres développeurs sur la façon de les utiliser. C'est aussi parce que Hu a une vision de ce à quoi ressemblera son "RealVerse". "Pourquoi ai-je créé HoloKit ? Je suis un artiste. J'ai rêvé de quelque chose comme ça, alors j'ai créé HoloKit pour que tout le monde puisse partager mon rêve." Lorsque la technologie et le marché arriveront à maturité, Hu s'attend à ce que Holo Interactive publie HoloKit sous une licence logicielle open source.

La plateforme s'appuiera toujours fortement sur les partenariats et les collaborations. Holo Interactive s'est déjà associé à la Web3 Gallery de New York, où vous pourrez entrer et faire une démonstration du HoloKit X. Finalement, vous pourrez voir les NFT et les avatars prendre vie dans le monde réel.

Une grande partie de HoloKit donne l'impression qu'il est conçu pour être installé dans des musées et des espaces tels que la galerie Web3 afin que les professionnels de la création et les spécialistes du marketing puissent présenter leurs expériences artistiques ou de marque dans une réalité mixte, en sautant sur le bavardage du métaverse. Mais Hu veut qu'il y ait aussi une communauté. C'est pourquoi il est si facile de partager et de voir l'expérience HoloKit X de quelqu'un avec le mode Spectateur.

Cependant, il y a toute une partie du marché pour laquelle HoloKit ne fonctionnera pas : les utilisateurs d'Android. Hu dit que tout ce que l'équipe a construit repose sur des technologies spécifiques de l'iPhone, comme le lidar, qui n'a pas encore fait ses débuts sur un téléphone Android. "Pour la réalité augmentée, vous avez vraiment besoin que du matériel, des logiciels et du silicium fonctionnent ensemble", déclare Hu, un exploit que Google n'a accompli que récemment. "Nous ne prendrons pas en charge Android tant que WebXR ne sera pas mature", dit-il, faisant référence à la plate-forme qui vous permet de créer des expériences de réalité mixte accessibles depuis un navigateur.

Nous avons vu Apple présenter diverses expériences de réalité augmentée chaque fois que sa conférence de développeurs se déroule, mais cela implique généralement une personne tenant son téléphone devant son visage alors qu'elle se promène dans un espace. Hu pense à peine que ce soit interactif. Regrouper la technologie existante dans un système qui vous permet de placer l'iPhone sur votre tête, en laissant les mains libres, sans vous entraîner dans un monde virtuel a le potentiel d'élever le travail d'Apple et de donner à encore plus de personnes avec un iPhone leur premier aperçu de ce nouveau réalité.