Microsoft va équiper les soldats américains de casques de réalité augmentée

Microsoft et l’armée américaine ont annoncé que le système intégré de renforcement visuel (IVAS – Integrated Visual Augmentation System), une version militaire améliorée du dispositif de réalité augmentée HoloLens, allait passer du stade du prototypage à celui de la production.

Dans une annonce datée du 31 mars, le Program Executive Office – Soldier (PEO Soldier) de l’armée de terre a annoncé “un accord de production à prix fixe pour la fabrication” d’IVAS, ajoutant que le contrat “fait passer IVAS à la production et à la mise en service rapide”.

Alex Kipman, membre technique de Microsoft, a publié sur son blog : Nous apprécions le partenariat avec l’armée américaine et nous sommes reconnaissants de la confiance qu’elle nous accorde pour faire passer IVAS du prototypage rapide à la mise en service rapide.

IVAS réalité augmentée Courtney Bacon / Soldat PEO

L’IVAS ajoute des capteurs de vision nocturne et d’imagerie thermique à l’habituel affichage tête haute HoloLens, et est renforcé pour un usage militaire. En plus de permettre aux soldats de voir dans l’obscurité et en vision thermique, il est destiné à leur permettre de visualiser et de comprendre facilement des informations provenant de nombreuses sources.

La position des autres soldats, signalée par les systèmes GPS de leurs propres IVAS, apparaîtrait sur l’affichage tête haute. Il en va de même pour les ennemis, détectés par les drones ou les avions qui les survolent, ou trouvés par d’autres soldats. Il serait possible de projeter un viseur de canon sur l’écran IVAS, afin de montrer où l’arme d’un soldat est dirigée, même si celui-ci ne regarde pas dans le viseur. Naturellement, le système peut être utilisé pour appeler des cartes et d’autres informations utiles.

D’autres applications pourraient permettre aux soldats de voir à travers les murs, par exemple lorsqu’ils sont assis à l’arrière d’un véhicule blindé et qu’ils peuvent simplement tourner la tête pour voir ce qui se trouve à l’extérieur en important les données des systèmes de caméras omnidirectionnelles du véhicule.

Les troupes peuvent également avoir accès à des cartes en 3D de la ville ou des bâtiments, ce qui leur permet de savoir ce qui les attend avant de franchir une porte ou de prendre un virage.

Le président de Microsoft, Brad Smith, a même suggéré que l’IVAS pourrait intégrer la technologie de reconnaissance faciale, en signalant dans la base de données des informations sur les personnes qu’il a détectées devant un soldat.

Microsoft a audacieusement déclaré à l’AP que l’IVAS pourrait désormais valoir “jusqu’à” 21,88 milliards de dollars au cours des dix prochaines années. Cependant, seulement 1,12 milliard de dollars ont été budgétés pour le projet dans l’exercice 2021, et le Congrès a réduit ce montant à 897 millions de dollars en décembre.

Si IVAS réussit, il sera probablement le sauveur de HoloLens. À l’origine, Microsoft, comme d’autres entreprises technologiques, espérait que les lunettes de VR/AR pourraient être vendues aux joueurs, mais ces espoirs sont maintenant largement morts. HoloLens 2, la version civile actuelle, est désormais présentée comme un appareil de travail destiné aux chirurgiens, aux ingénieurs de maintenance, etc.

Le bracelet neuronal de Facebook : l’avenir de la réalité augmentée ?

Facebook fabrique un bracelet qui vous permet de contrôler les ordinateurs avec votre cerveau

L’appareil vous permettrait d’interagir avec les prochaines lunettes de réalité augmentée de Facebook simplement par la pensée

Facebook affirme avoir créé un bracelet qui traduit les signaux moteurs de votre cerveau afin que vous puissiez déplacer un objet numérique simplement par la pensée. Le bracelet utilise des capteurs pour détecter les mouvements que vous avez l’intention de faire (données neuronales). Il utilise l’électromyographie (EMG) pour interpréter l’activité électrique des nerfs moteurs lorsqu’ils envoient des informations du cerveau à la main.

Selon la société, l’appareil vous permettrait de naviguer dans des menus de réalité augmentée en pensant simplement à bouger votre doigt pour les faire défiler. On ne sait pas encore quand il sera commercialisé ni combien cela coûtera. Le produit est encore en phase de recherche et de développement dans les laboratoires internes de Facebook.

Lors de l’avant-première, Thomas Reardon, directeur des interfaces neuromotrices chez Facebook Reality Labs, a déclaré que le dispositif n’était “pas un moyen de contrôle mental”. Il a ajouté : “Cela vient de la partie du cerveau qui contrôle les informations motrices, pas la pensée.”

L’expérience la plus réussie en matière de réalité augmentée a été Pokémon Go, qui a pris le monde d’assaut en 2016. Cette promesse initiale s’est toutefois estompée au cours des années qui ont suivi, car les entreprises ont eu du mal à traduire cette technologie en quelque chose de réellement utile. Le fondateur de Facebook, Mark Zuckerberg, a investi de manière agressive dans la réalité augmentée et virtuelle, reconnaissant que des produits comme ceux-ci peuvent donner accès à d’innombrables sources de données précieuses. Est-ce que Facebook va percer ?

Tech@Facebook, Wired

Les interfaces cérébrales nous permettront de modifier nos sentiments

Le PDG de la société de jeux américaine Valve Corporation, Gabe Newell, déclare que son entreprise travaille sur un casque d’interface cerveau-ordinateur (BCI) qui pourrait rendre les jeux vidéo plus immersifs que jamais.

Dans une interview avec New Zealand 1 News, Newell a fait savoir que « l’expérience visuelle, la fidélité visuelle que nous serons capables de créer – le monde réel cessera d’être la métrique que nous appliquons à la meilleure fidélité visuelle possible – le monde réel semblera plat, incolore, flou par rapport aux expériences que vous pourrez créer dans le cerveau des gens. »

Valve collabore avec OpenBCI, une société spécialisée dans les biocapteurs, sur ce que Newell a appelé un “projet open source pour que tout le monde puisse disposer de technologies de lecture haute résolution [signal cérébral] intégrées dans les casques”.

« Là où ça devient bizarre, c’est quand ce que vous êtes devient modifiable via une interface neuronale directe”, a déclaré Newell. “Notre capacité à créer des expériences dans le cerveau des gens, qui ne sont pas transmises par leurs périphériques de chair, dépasseront tout ce qui est possible”.

La technologie pourrait permettre aux utilisateurs de modifier non seulement ce qu’ils voient, mais aussi leurs sentiments et leurs émotions. Par exemple, Newell a affirmé qu’un tel casque pourrait améliorer le sommeil. Plus tard, d’autres sentiments non désirés pourraient être supprimés ou totalement éliminés, une forme de thérapie digne de la science-fiction.

Pour finir, Newell ne pense pas que les BCI vont inonder le marché du jour au lendemain – notamment pour des raisons de sécurité – et il faudra encore de nombreuses années avant qu’un dispositif commercialisable n’émerge, même pour Valve.

Une mère retrouve son enfant décédé en RV

Souhaitez-vous revoir un être cher décédé – dans un monde virtuel ?

En 2016, Nayeon, la fille de sept ans de Jang Ji-sung, est morte d’une maladie incurable. Trois ans plus tard, la mère sud-coréenne a retrouvé Nayeon – en quelque sorte – dans un monde virtuel créé pour un documentaire télévisé.

La Munhwa Broadcasting Corporation a diffusé sur sa page YouTube un extrait du documentaire spécial intitulé “I Met You”, dont les images se situent entre le “monde réel” et le monde virtuel.

Dans un premier temps, Jang se tient devant un écran vert massif tout en portant à la fois un casque VR et ce qui semble être une sorte de gants haptiques. Puis, elle et sa fille discutent, se tiennent la main et organisent même une fête d’anniversaire avec un gâteau.

La rencontre avec la réalité virtuelle est, comme on peut s’y attendre, extrêmement émouvante. Jang semble se mettre à pleurer dès qu’elle voit sa fille virtuelle, tandis que le reste de la famille – le père, le frère et la sœur de Nayeon – regarde les retrouvailles se dérouler avec des expressions plus sombres et quelques larmes occasionnelles.

“Peut-être que c’est le vrai paradis”, a déclaré Jang à propos des retrouvailles en RV, selon l’Aju Business Daily. “J’ai retrouvé Nayeon, qui m’a appelée avec un sourire, pendant une très courte durée, mais c’est un moment très joyeux. Je crois que j’ai réalisé le rêve que j’ai toujours souhaité”.

Selon Aju Business Daily, l’équipe de production a passé huit mois sur le projet. Ils ont conçu le parc virtuel d’après celui visité par la mère et la fille dans le monde réel, et ont utilisé la technologie de capture de mouvement pour enregistrer les mouvements d’un enfant acteur qu’ils pourraient ensuite utiliser comme modèle pour représenter leur Nayeon virtuel.

Tout cela pour dire que le processus n’est peut-être pas si simple et que le produit final n’est probablement pas parfait, mais nous disposons maintenant de la technologie nécessaire pour recréer les morts en RV – de manière suffisamment convaincante pour émouvoir leurs proches jusqu’aux larmes.

Les implications sont impossibles à prévoir. Quel type d’impact cela aura-t-il sur le processus de deuil ? Le fait de voir un être cher en RV aidera-t-il les gens à tourner la page et à aller de l’avant après un décès ? Certaines personnes deviendront-elles dépendantes de ce monde virtuel, en y passant de plus en plus de temps et de moins en moins dans le monde réel ? Et cela s’arrêtera-t-il avec la RV ? Ou est-ce seulement la première étape vers des androïdes conçus pour imiter nos proches décédés, tant dans leur apparence que dans leur personnalité ?

Plusieurs startups préparent le terrain pour ce futur, en compilant des données sur les personnes vivantes et décédées afin de pouvoir créer des “avatars numériques” de ces personnes. D’autres entreprises construisent déjà des clones robotisés de personnes réelles.

Aju Business Daily, DailyMail

IKEA veut que vous achetiez avec la réalité augmentée

IKEA permettra bientôt aux clients de commander des meubles en ligne via une application pour smartphone à réalité augmentée (Reuters). La nouvelle application associe le type de position de mobilier de réalité augmentée que nous avions précédemment vue dans l’application IKEA Place à des achats en ligne complets – ce que IKEA a limité à son site Web jusqu’à maintenant.

Le service sera expérimenté en France et aux Pays-Bas et devrait être déployé d’ici à la fin de l’année sur les huit plus grands marchés d’IKEA, y compris le Royaume-Uni. La société affirme qu’elle pourrait reconfigurer ses magasins avec davantage d’entrepôts si son dernier projet de commerce électronique est un succès.

Les employés de Microsoft appellent à la fin du projet militaire de réalité augmentée

Plus de 100 employés de Microsoft ont signé une lettre appelant les dirigeants, Satya Nadella et Brad Smith, à annuler le contrat de l’entreprise pour le développement de sa technologie de casque de réalité augmentée HoloLens pour l’armée américaine.

Les employés de Microsoft écrivent : “Bien que l’entreprise ait déjà octroyé une licence de technologie à l’armée américaine, elle n’a jamais franchi le pas en matière de développement d’armes. Avec ce contrat, elle le fait.”

Cette lettre a été publiée peu de temps avant que Microsoft ne dévoile son casque amélioré HoloLens 2 au salon de MWC de Barcelone.

TechCrunch

Les soldats américains porteront les casques de réalité augmentée HoloLens Microsoft au combat

La FDA approuve le premier système de réalité augmentée à usage chirurgical

La FDA a récemment approuvé le système de réalité augmentée OpenSight de Novarad, la première solution médicale de réalité augmentée pour Microsoft HoloLens autorisée à être utilisée dans la planification chirurgicale préopératoire.

La technologie permet de projeter des images 2D, 3D et 4D de patients de manière interactive en les superposant sur le corps du patient, selon un communiqué de presse de Novarad publié le 24 octobre.

OpenSight utilise spécifiquement le casque Microsoft HoloLens qui permet la visualisation simultanée des images 3D du patient en réalité augmentée, du patient réel et de son environnement réel. La technique peut réduire les temps opératoires et améliorer la planification chirurgicale et la compréhension des relations anatomiques.

« C’est une technologie transformatrice qui réunira l’imagerie préopératoire avec la réalité augmentée pour améliorer la précision, la rapidité et la sécurité des procédures médicales », a déclaré Wendell Gibby, MD, PDG de Novarad et co-créateur d’OpenSight. « Cette visualisation interne peut maintenant être réalisée sans que le chirurgien ne fasse d’incision, améliorant les résultats dans un monde de médecine plus précise. »

La technologie permet également une expérience multi-utilisateur, étant donné que plusieurs casques HoloLens peuvent être portés parmi les utilisateurs à des fins de formation ou cliniques. Une version pédagogique du logiciel est également disponible pour que les étudiants en médecine puissent effectuer des dissections virtuelles sur des cadavres, selon le communiqué de presse.

Des lunettes intelligentes avec un écran de réalité mixte

Les lunettes intelligentes Focals de North Inc. sont fabriquées sur mesure en utilisant un processus de dimensionnement unique pour assurer un ajustement parfait et attrayant. Pour 1 000 $ elles vous permettront de vous promener en ville avec votre propre écran de réalité mixte.

Selon le site Web de la société, Focals a une version intégrée de l’assistant personnel Alexa d’Amazon et vous permettra d’envoyer des SMS à vos amis, d’appeler un Uber, d’écouter de la musique, et de vous fournir des mises à jour de la météo et du calendrier. Focals n’a pas de caméra.

Les lunettes intelligentes offrent une navigation intuitive dans votre champ de vision, vous permettant ainsi de vous rendre où vous voulez sans rien manquer le long du chemin.

Wired, North Inc.

Veer VR lance un outil pour la création de contenu VR

Veer VR a lancé un outil gratuit de création de contenu de réalité virtuelle basé sur le Web, dans le cadre d’un effort visant à inciter les utilisateurs à créer davantage de contenu au sein de la communauté mondiale de contenu VR de Veer.

Veer Experience est un outil de création interactif sans codage que les utilisateurs peuvent utiliser pour créer des photos et des vidéos VR, y compris celles qui peuvent être visualisées en 2D sous forme d’expériences à 360 degrés. Veer compte déjà plus de 50 000 créateurs et 30 millions d’utilisateurs provenant de plus de 180 pays.

«L’industrie de la réalité virtuelle manque de contenu de qualité, mais avec les outils appropriés, nous pourrons permettre aux créateurs de produire plus facilement des contenus VR attrayants de haute qualité», a déclaré Ayden Ye, PDG de Veer VR. «En utilisant la plate-forme de contenu Veer VR, le nouveau contenu VR sera diffusé à un large public mondial. Veer continuera à développer des fonctionnalités plus avancées répondant aux besoins des créateurs de contenu VR. »

Veer Experience s’adresse aux créateurs de contenu VR qui veulent raconter leurs histoires de photos et de vidéos VR de manière plus engageante, créative et immersive. Veer Experience prend en charge les arrière-plans vidéo et photo VR dans différents formats (360 degrés, 3D FOV) et permet aux créateurs de créer simplement une histoire interactive en ajoutant des zones sensibles, des cartes, des hyperliens externes, des vidéos et des photos VR.

Vous pouvez utiliser Veer Experience pour distribuer du contenu VR sur des plates-formes en un seul clic. Les vidéos et photos Veer Experience fonctionnent sur le Web, le mobile et les principaux casques de réalité virtuelle, notamment Oculus Go, Oculus Rift, HTC Vive, Gear VR, Google Daydream, Windows MR, Mi VR, etc. Une grande partie du contenu se concentre sur les voyages, les sports et les aventures.

Les investisseurs de Veer comprennent Bertelsmann Asia Investment, DCM, Qiming VC, Sierra Venture et Samsung NEXT. La société compte 70 employés et a obtenu son premier tour de financement en 2016. À ce jour, elle a recueilli 17,5 millions de dollars. Auparavant, Veer ne supportait que la vidéo VR et les images VR. Grâce au nouvel outil d’expérience, les utilisateurs seront en mesure de créer des récits vidéos interactifs à 360 degrés VR en quelques clics. Warner Bros Pictures, la Banque mondiale et The Academy of Art figurent parmi les meilleurs créateurs.