VR / AR / MR champ, l'interaction est très importante partie! Maintenant, l'interaction familière est le principal moyen de commande, gamepad, des gants et d'autres périphériques, et la reconnaissance des gestes! Quelle expérience la plus façon naturelle et humaine au geste Interact la reconnaissance, mais la technologie pour les aspects des algorithmes, la sensibilité, la précision et d'autres exigences sont plus exigeants!
Microsoft MRTouch: tout plan converti en un écran tactile de réalité mixte
Dans les deux premiers aspects importants de l'interaction et Microsoft ont investi beaucoup d'efforts, lancé en 2016 au nom de HoloLens est fait! HoloLens version complète de MR (Réalité mixte) tête charme évident, mais aussi pour le lancement ultérieur de plate-forme Windows MR posée fondation. Bien sûr, les restes de HoloLens à considérer, mais comme un « concept universel » produits, son rôle mérite d'être reconnu! HoloLens offre une nouvelle plate-forme pour le contenu, les développeurs de la technologie, mais aussi permettre aux consommateurs d'avoir accès à « noir la science et la technologie ".
Récemment, les chercheurs de Microsoft ont révélé une technologie interactive appelée MRTouch peut être Hololens (à l'avenir soutiendra plus d'appareils) pour obtenir le contenu de réalité mixte de la « opération tactile. » Avant cela, HoloLens soutient déjà la reconnaissance des gestes, la reconnaissance des yeux (regarder), commande vocale et d'autres interactions.
Microsoft MRTouch: tout plan converti en un écran tactile de réalité mixte
Pour une opération tactile n'a pas besoin de trop introduction, les téléphones mobiles, les tablettes PC et même certains utilisent cette forme interactive. Microsoft a deux HoloLens environnement en mode suivi - longue distance (longue portée) et courte piste (courte portée) suivi. Mode longue distance est principalement utilisé pour déterminer le suivi porteur milieu environnant, telles que les murs de la salle, les obstructions, etc. (moins précise), une reconnaissance de motif de suivi de piste courte portée plage limitée, la partie principale pour compléter la reconnaissance de la main, l'application MRTouch il est basé sur le modèle. Microsoft chercheurs caméra profondeur à courte distance intégré avec le signal de la caméra infrarouge sans compter sur les informations de la caméra de profondeur est longue pour fournir une image plane précise. Les chercheurs ont dit, MRTouch capable de courir sans carte 3D complète de la situation de l'environnement.
Microsoft MRTouch: tout plan converti en un écran tactile de réalité mixte
Selon Microsoft a publié un point de vue de la présentation vidéo, HoloLens d'abord déterminer si le plan avant (bureau, mur ou même capot de voiture), puis ceux qui font l'expérience d'un doigt en haut à gauche pour glisser en bas à droite, vous pouvez voir un programme de fenêtre de menu, y compris le navigateur variété d'applications, un dessin et autres.
Microsoft MRTouch: tout plan converti en un écran tactile de réalité mixte
Par exemple, après l'ouverture du navigateur, peut être utilisé comme une tablette, comme, glisser vers le haut et vers le bas pour naviguer! Par rapport aux téléphones, les tablettes, les avantages du dispositif à l'aide de MR est que l'utilisateur peut obtenir une « interaction 3D », comme dans les graphiques en deux dimensions de rendu, dans la troisième dimension correspondant au geste en mouvement, le motif devient plan graphique en trois dimensions, cette fois l'utilisateur se déplace, la transformation en perspective peuvent observer les graphiques 3D.
Microsoft MRTouch: tout plan converti en un écran tactile de réalité mixte
Microsoft MRTouch: tout plan converti en un écran tactile de réalité mixte
Aussi dans différentes applications, l'option de bouton correspondant peut également être utilisé pour faire fonctionner le toucher, et MRTouch prendre en charge jusqu'à 10 interaction tactile.
Microsoft MRTouch: tout plan converti en un écran tactile de réalité mixte
vitesse de suivi des logiciels MRTouch de 25fps, comporte trois volets: l'image Streamer, Tracker Moteur et bibliothèque du client. Serpentin d'image et des données de profondeur à partir de la sortie de la caméra infrarouge et l'envoie au moteur via Tracker socket TCP. moteur MRTouch Tracker reçoit des données de l'image Streamer, enregistrer et utiliser la « surface de suivi connu » et une liste de coordonnées. Comme toute application Microsoft Windows, comme la plate-forme de réalité mixte, se déplaçant dans l'espace, la fenêtre MRTouch reste toujours à sa place. Le troisième composant est le système client bibliothèque MRTouch, il ouvre couplé pour recevoir des données et des informations de position tactile moteur TCP Tracker. Ensuite, la bibliothèque client convertit les informations dans une application peut interpréter le format.
Microsoft MRTouch: tout plan converti en un écran tactile de réalité mixte
À l'heure actuelle, MRTouch fonctionne sur Microsoft HoloLens, mais l'équipe a créé une API dit personnalisée à un logiciel de construction, ce qui signifie MRTouch facilement porté à un autre dispositif de réalité mixte. Mais, maintenant Microsoft n'a pas révélé le temps de sortie officielle MRTouch et d'information, vous voulez en savoir plus vous pouvez lire un document de recherche que le chef d'équipe Rober Xiao a publié.
produits optiques holographiques Microsoft de HoloLens de type lunettes intelligentes verres clés HoloLens de performance, vous pouvez suivre avec précision la voix de l'utilisateur, l'action de fournir pleinement intégrée dans les images holographiques environnantes. D'autres fonctionnalités intégrées CPU haut de gamme et le GPU, la perspective lentille holographique, équipé de puce de traitement holographique, par contrôle gestuel, fournissant une image holographique, bande sonore, l'action et de l'environnement, utilisé dans l'exploration de Mars, la conception architecturale, la chirurgie, etc. caméra de profondeur de perspective est de 120 × 120 degrés, générant un certain nombre de haut-données de capteur, GPU, et le premier pour régler le volume du côté droit HPU (unité de traitement holographique) pour le traitement par la CPU dans l'air ,, et le réglage du contraste de l'hologramme
