Article original : The iPhone X’s TrueDepth IR Camera: A Universe of Possibilities Beyond Animojis and Face ID
Par James Hsu
Plus de deux mois après le lancement de l'iPhone X, il reste un mystère pour certains de déterminer exactement quelles fonctionnalités pourraient justifier le prix de 1000 $ et plus qu'Apple a donné à son téléphone phare.
Certains pourraient miser sur l'écran OLED presque sans bordure, qui, pour la première fois sur un iPhone, élimine le bouton d'accueil tactile et les larges bordures supérieure et inférieure de tous les modèles précédents. Il est admis qu'il est magnifique.
Cependant, il s'avère que la fonctionnalité la plus révolutionnaire de l'iPhone X n'est même pas discernable au premier regard, même si elle vous regarde littéralement en face.
Rencontrez la caméra IR TrueDepth
Apple a été poursuivi par des perceptions selon lesquelles la feuille de route des produits de l'entreprise est devenue conservatrice et prévisible au cours des six années suivant le décès de Steve Jobs. La nouvelle caméra IR TrueDepth, comme Apple appelle la caméra frontale secondaire de l'iPhone X, pourrait bien aider Apple à dissiper ces rumeurs de complaisance.
Nouveauté de l'iPhone X et logée dans l'encoche noire en haut de l'écran, la technologie comprend un certain nombre de composants high-tech tels qu'un "illuminateur de flood", une caméra infrarouge (IR) et un émetteur infrarouge. Ce dernier émet 30 000 points infrarouges dans un motif connu lorsqu'un visage est détecté, permettant à l'iPhone X de générer une carte 3D du visage d'un utilisateur. Notamment, la caméra IR TrueDepth peut le faire suffisamment rapidement pour soutenir la création de données de mouvement 3D également.
À l'heure actuelle, il existe actuellement deux cas d'utilisation pris en charge pour la nouvelle caméra IR TrueDepth sur l'iPhone X :
- Animoji, ou emoji animés — la caméra anime un emoji 3D avec vos expressions faciales capturées, que vous pouvez ensuite envoyer via Messenger ou SMS.
- Face ID — la caméra utilise une image 3D stockée localement de votre visage pour authentifier et déverrouiller votre iPhone X. Parce qu'elle utilise des données d'image 3D, il est beaucoup plus difficile de la tromper que les systèmes de reconnaissance faciale mobiles précédents qui utilisaient une image 2D et pouvaient donc être trompés avec une photo.
« Qu'est-ce que c'est ? C'est tout ? »
Admettons-le, les cas d'utilisation actuels de cette technologie sont limités.
Les Animojis ne sont que des emojis avec une touche amusante, et le déverrouillage des téléphones n'a pas exactement été un point de douleur pour les utilisateurs modernes de smartphones, avec la prévalence des capteurs d'empreintes digitales sur de nombreux téléphones et le dessin de motifs comme option secondaire adéquate.
Ce qui est incroyablement intrigant, c'est que la technologie de la caméra IR TrueDepth peut et aura des applications beaucoup plus fortes dans un avenir très proche. Comme pour l'ancien Touch ID de l'iPhone (capteur d'empreintes digitales), un SDK iOS facilite l'utilisation de Face ID et de la caméra IR TrueDepth pour une myriade d'autres cas d'utilisation plus convaincants par les développeurs d'applications. En fait, Face ID utilise exactement la même API que Touch ID, rendant l'implémentation dans les applications mobiles incroyablement simple.
Voici quelques-uns des domaines où la caméra IR TrueDepth pourrait donner naissance à des applications mobiles utiles ou intéressantes :
Services financiers et banque en ligne
Depuis plus d'une décennie, la norme en matière d'authentification bancaire sur Internet a été l'authentification à deux facteurs. L'une des formes les plus courantes d'authentification à deux facteurs a impliqué l'envoi d'un code de vérification envoyé à votre téléphone ou à votre adresse e-mail, qui doit ensuite être saisi manuellement avec votre mot de passe pour accéder à votre compte.
Au cours des dernières années, les applications de banque mobile ont été rapides à ajouter la prise en charge de l'authentification basée sur les empreintes digitales. Cela a rendu plus facile que jamais l'accès à vos comptes bancaires en ligne en utilisant votre téléphone mobile. Pour les banques, cela signifie que les clients ont un accès plus facile à leurs services, ce qui se traduit par une augmentation des revenus.
Pourquoi, étant donné la commodité déjà améliorée de l'authentification basée sur les empreintes digitales, les banques se soucieraient-elles de mettre en œuvre la reconnaissance faciale dans leurs applications mobiles ? Pour comprendre pourquoi, considérons les taux de faux positifs — le taux auquel un protocole d'authentification donné fournit une authentification fausse. Apple affirme que Touch ID, son authentification basée sur les empreintes digitales, a un taux de faux positifs de 1 sur 50 000. Comparez cela à la chance de deviner un code PIN à quatre chiffres, 1 sur 10 000.
Maintenant, examinons la nouvelle fonctionnalité Face ID de l'iPhone X. Apple affirme que Face ID a un taux de faux positifs d'environ 1 sur 1 000 000. Si c'est vrai, cela représente une amélioration de 20 fois en termes de précision par rapport à l'authentification basée sur les empreintes digitales et une amélioration de 100 fois par rapport à un code PIN à quatre chiffres.
Cela est sûr d'attirer l'attention des banques offrant des services bancaires en ligne, ainsi que des consommateurs qui bénéficient également d'une protection accrue contre la fraude. En fait, de nombreuses banques ont déjà mis en œuvre la prise en charge de Face ID dans leurs applications iOS. Chase, par exemple, a ajouté la prise en charge de Face ID dans les deux semaines suivant le lancement de l'iPhone X.
Divertissement et amusement
iOS 11 a introduit ARKit, un nouveau framework qui permet aux développeurs de créer facilement des expériences de réalité augmentée sans précédent pour iPhone et iPad. Combiné avec la caméra IR TrueDepth de l'iPhone X, ARKit ouvre une capacité révolutionnaire pour un suivi robuste du visage dans plusieurs catégories d'applications.
Imaginez :
- Entrer dans l'écran de création de personnage pour Assassin's Creed: Identity et pouvoir non seulement choisir la classe de votre assassin mais aussi son identité visuelle, en utilisant votre propre visage à la place du modèle de personnage par défaut.
- Avoir une vue plus précise du visage d'un match potentiel avant de choisir de glisser à gauche ou à droite sur Tinder, Bumble ou POF.
- Pouvoir sauter un voyage chez Sephora ou ULTA et expérimenter avec de nouveaux maquillages sans tout acheter d'avance.
Il y a quelques années, la technologie de réalité virtuelle (VR) était au même stade que la technologie derrière TrueDepth IR aujourd'hui : une technologie prometteuse nécessitant des applications plus fortes dans les jeux vidéo et le divertissement.
Oculus, une entreprise de réalité virtuelle, a été fondée en 2012 et a mené une campagne Kickstarter réussie cette année-là, levant 2,5 millions de dollars. Juste deux ans plus tard, en 2014, Oculus a été acquis par Facebook pour 2 milliards de dollars, soit près de mille fois le tour de financement initial. Les entreprises qui investissent dans des applications de divertissement utilisant la technologie TrueDepth IR pourraient-elles trouver une trajectoire similaire ?
Il y a déjà des précédents dans ce domaine, aussi. Il y a deux ans — lorsque le suivi du visage était encore basé sur des images bidimensionnelles — Facebook a acheté (pour un montant non divulgué) Masquerade, une startup dont l'application MSQRD permet aux utilisateurs de créer des images et des vidéos auto-altérées en utilisant la technologie de suivi du visage.
Médical et fitness
Imaginez pouvoir passer un examen médical à toute heure du jour, à la demande, depuis le confort de votre lit, canapé ou fauteuil de bureau. Avec l'aide de la caméra IR TrueDepth de l'iPhone X, cela pourrait devenir une réalité.
La technologie TrueDepth IR a le potentiel d'être utilisée pour l'imagerie médicale, car elle peut créer des cartes 3D détaillées de votre visage, y compris la surface de votre peau. Notamment, elle peut également capturer des mouvements 3D, y compris des changements subtils dans l'expression faciale.
Considérez les cas d'utilisation médicale potentiels suivants :
- Faire examiner une croissance anormale de la peau par un dermatologue, avec la possibilité de faire tourner l'image pour mieux voir la structure d'une potentielle tumeur, par exemple.
- Avoir votre téléphone qui vous alerte automatiquement lorsqu'il remarque des signes faciaux ou des mouvements subtils qui pourraient être associés au début d'un accident vasculaire cérébral, d'une crise ou d'une crise cardiaque.
- Pour les patients en convalescence après un accident vasculaire cérébral, vous pourriez avoir une application qui suit toute dégénérescence musculaire au fil du temps et fournit à vos médecins ces données d'image 3D détaillées à la demande.
Bien que ces cas d'utilisation ne remplaceraient certainement pas le besoin de passer des examens en personne, un dépistage régulier via la caméra du téléphone pourrait jouer un rôle de soutien en permettant une détection précoce ou un suivi régulier de conditions médicales connues.
Considérez également qu'Apple a publié un kit de développement logiciel (SDK) appelé Apple Healthkit, qui permet aux développeurs d'applications d'accéder via une API à des informations riches sur la santé et le fitness provenant de diverses sources : wearables de fitness, dispositifs de santé et applications logicielles. De nouvelles applications mobiles ou mises à jour pourraient combiner les données vitales de santé d'Apple Healthkit avec des données d'image faciale 3D pour offrir une évaluation plus complète de la santé ou du fitness des utilisateurs.
Le futur est là
L'iPhone X est le premier téléphone à offrir des caméras IR à détection de profondeur, mais il ne sera certainement pas le dernier.
« Avec le large éventail de nouveaux cas d'utilisation que la technologie rend possibles, l'impulsion est maintenant sur les développeurs de logiciels et les entreprises audacieuses de donner vie à ces applications », a déclaré Harry Lee, PDG de CitrusBits. Basée à Los Angeles et San Francisco, CitrusBits est une agence de développement d'applications mobiles qui conçoit et développe des applications mobiles primées pour certaines des marques les plus connues au monde, dont Burger King, Symantec et Quiksilver.
« Ceux qui adoptent la technologie maintenant peuvent profiter des avantages du premier arrivant, tels que la capacité de construire une part de marché importante et de bénéficier de forts effets de réseau qui découragent les futurs entrants sur le marché — sans parler de l'opportunité de se faire racheter par Facebook, Microsoft ou un autre géant de l'industrie », explique Lee.
Pour voir plus d'histoires comme celle-ci, abonnez-vous à la newsletter de CitrusBits, Bits & Bytes.