Microsoft presenta Microsoft Mesh: Mesh potencia las experiencias compartidas en una realidad mixta

Durante años, el cofundador del Cirque du Soleil (Guy Laliberté) recibió innumerables propuestas de tecnologías de realidad virtual; pero no pudieron igualar la magia de sus actuaciones en vivo.

Ahora, con la nueva plataforma proporcionada por Microsoft, está reconsiderando eso.

El martes, apareció en la conferencia digital Ignite de Microsoft a través de holoportación, que utiliza tecnología de captura 3D para transmitir una imagen realista de una persona a una escena virtual.

En la primera experiencia magistral de la compañía diseñada por completo para la realidad mixta, las personas que asistieron a la conferencia desde salas de estar y oficinas en el hogar de todo el mundo pudieron experimentar el espectáculo mientras los avatares veían los eventos desarrollarse en un mundo holográfico compartido.

Fue la primera oportunidad de la compañía para mostrar algunas de las experiencias posibles gracias a Microsoft Mesh, una nueva plataforma de realidad mixta impulsada por Azure que permite a las personas en diferentes ubicaciones físicas unirse a experiencias holográficas colaborativas y compartidas en muchos tipos de dispositivos.

“Este ha sido el sueño de la realidad mixta, la idea desde el principio”, dijo Alex Kipman, miembro técnico de Microsoft.

Kipman apareció en el escenario virtual de Ignite como una holoportación completamente realizada de sí mismo, narrando la experiencia de apertura del programa en tiempo real, generado a través de rayos de luz que simulaban su cuerpo físico.

“De hecho, puedes sentir que estás en el mismo lugar con alguien que comparte contenido o puedes teletransportarte desde diferentes dispositivos de realidad mixta y estar presente con la gente incluso cuando no están físicamente juntos”.

James Cameron, el cineasta y explorador del océano, y John Hanke, director ejecutivo y fundador de la empresa líder en realidad aumentada Niantic, Inc., también se unieron a Kipman de forma remota para destacar cómo Microsoft Mesh los está ayudando a crear experiencias compartidas en los mundos virtual y físico.

Laliberté conversó con Kipman sobre una nueva colaboración para ayudar a Lune Rouge, otra empresa que fundó Laliberté, a realizar un proyecto llamado Hanai World.

Es una plataforma social de realidad mixta en la que ha pensado durante años, que conectaría experiencias de entretenimiento en vivo y digitales en eventos únicos, pero solo ahora tecnologías como Microsoft Mesh se han puesto al día con esa visión.

Microsoft Mesh también permitirá a los equipos distribuidos geográficamente tener más reuniones colaborativas, realizar sesiones de diseño virtual, ayudar a otros, aprender juntos y organizar reuniones sociales virtuales.

Inicialmente, las personas podrán expresarse como avatares en estas experiencias virtuales compartidas y, con el tiempo, usarán la holoportación para proyectarse como sus seres más realistas y realistas, dijo la compañía.

La nueva plataforma es el resultado de años de investigación y desarrollo de Microsoft en áreas que van desde el seguimiento de manos y ojos y el desarrollo de HoloLens hasta la creación de hologramas persistentes y modelos de inteligencia artificial que pueden crear avatares expresivos.

Microsoft Mesh, que se basa en Azure, la plataforma de computación en la nube de Microsoft, también se beneficia de las características de seguridad y privacidad de nivel empresarial de Azure, así como de sus vastos recursos computacionales, datos, inteligencia artificial y servicios de realidad mixta.

“Cada vez más estamos construyendo valor en nuestra nube inteligente, que es Azure”, dijo Kipman.

“En estas experiencias colaborativas, el contenido no está dentro de mi dispositivo ni dentro de mi aplicación. El contenido holográfico está en la nube y solo necesito lentes especiales que me permitan verlo “.

Con las aplicaciones habilitadas para Microsoft Mesh, los diseñadores o ingenieros que trabajan con modelos físicos en 3D, desde bicicletas hasta muebles de alta gama, motores a reacción y nuevos estadios deportivos, podrían aparecer como ellos mismos en un espacio virtual compartido para colaborar e iterar en modelos holográficos. independientemente de su ubicación física.

Los arquitectos e ingenieros podrían caminar físicamente a través de un modelo holográfico de una fábrica en construcción, viendo cómo todos los equipos encajan en tres dimensiones, evitando potencialmente errores costosos.

Los estudiantes de ingeniería o medicina que están aprendiendo sobre motores de automóviles eléctricos o anatomía humana podrían reunirse como avatares alrededor de un modelo holográfico y quitar partes del motor o pelar los músculos de la espalda para ver qué hay debajo. Los colegas podrían simplemente reunirse y charlar en un espacio virtual compartido, o las empresas podrían usar aplicaciones habilitadas para Microsoft Mesh para ofrecer reuniones virtuales o capacitaciones para todos los empleados de todo el mundo.

La plataforma Microsoft Mesh ofrecerá en los próximos meses a los desarrolladores un conjunto completo de herramientas impulsadas por IA para avatares, gestión de sesiones, renderizado espacial, sincronización entre múltiples usuarios y holoportación para construir soluciones colaborativas en realidad mixta, dijo la compañía.

Aunque los usuarios tendrán las experiencias más ricas en realidad virtual o mixta, los estándares abiertos de Microsoft Mesh darán a los desarrolladores la libertad de crear soluciones que funcionen en muchos dispositivos diferentes: HoloLens 2, una gama de cascos de realidad virtual, teléfonos inteligentes, tabletas y PC.

En Ignite, Microsoft anunció dos aplicaciones creadas en la plataforma Microsoft Mesh

Estos incluyen una vista previa de la aplicación Microsoft Mesh para HoloLens, que permite a los miembros del equipo colaborar de forma remota y está disponible para descargar. Los clientes también pueden solicitar acceso a una nueva versión de AltspaceVR habilitado para Mesh , que permitirá a las empresas realizar reuniones y reuniones de trabajo en realidad virtual con características de seguridad de nivel empresarial que incluyen inicios de sesión seguros, administración de sesiones y cumplimiento de privacidad.

Con el tiempo, la compañía dijo que espera que los clientes puedan elegir entre un creciente conjunto de aplicaciones habilitadas para Microsoft Mesh creadas por desarrolladores y socios externos, y también beneficiarse de la integración planificada con productos de Microsoft como Microsoft Teams y Dynamics 365.

“Es por eso que nos apasiona tanto la realidad mixta como el próximo gran medio para la computación colaborativa”, dijo Kipman. “Es mágico cuando dos personas ven el mismo holograma”.

Explorando el mundo juntos

A bordo de OceanXplorer , una de las embarcaciones de investigación y exploración de aguas profundas más avanzadas jamás construida, hay mucho espacio para albergar a todos los científicos que claman por aprender de los nuevos datos recopilados constantemente por instrumentos y cámaras en sus vehículos de aguas profundas que pueden sondear todo, desde arrecifes de coral y piscinas de salmuera hasta la vida marina alrededor de profundos respiraderos hidrotermales y minerales alrededor de volcanes submarinos.

En Ignite, OceanX, una organización sin fines de lucro que fusiona ciencia de vanguardia con narrativas convincentes y experiencias de productos y tecnología para respaldar la educación y concienciación sobre los océanos, anunció una nueva colaboración con Microsoft para crear un “laboratorio holográfico” habilitado para Mesh en el barco que los científicos podrían reunir. en persona, ya sea en persona o virtualmente desde laboratorios y oficinas de todo el mundo, para ver hologramas en 3D de las áreas que los vehículos están explorando.

Los investigadores que intentan descubrir por qué los cachalotes cazan en ciertas áreas, por ejemplo, podrían ver una representación holográfica de un cañón de aguas profundas con datos recopilados de etiquetas colocadas en las ballenas, superpuestas con información sobre la salinidad, la temperatura y los cambios de la química del océano e integradas con datos de buscadores de peces que muestran dónde podrían estar los calamares y otras presas.

“La idea es tomar todos estos datos científicos asombrosos que estamos recopilando y llevarlos a un entorno holográfico y usarlos como una forma de guiar las misiones científicas en tiempo real”, dijo Vincent Pieribone, vicepresidente de OceanX.

El objetivo es permitir que cualquier investigador con un HoloLens 2 u otro dispositivo compatible, que utilice Microsoft Mesh, aparezca alrededor de una mesa como avatar y apunte a un área particular en el fondo marino holográfico sobre la que pueda tener una pregunta y conversar en tiempo real. con otros científicos sobre lo que están viendo.

En las misiones de investigación de OceanX, a menudo hay grupos de personas apiñados alrededor de videos, haciendo preguntas y manteniendo conversaciones laterales con sus colegas. Los investigadores que no están en el barco, incluso si están viendo las mismas imágenes en una pantalla en su oficina, no siempre se benefician de esas interacciones, dijo Pieribone.

“Hay un componente social en esto que es esencial”, dijo. “Queremos llevar a todos a la misma ‘habitación’ para que puedan intercambiar cosas entre sí y tener esa conexión humana”.

Para expandir un tipo de exploración completamente diferente, Niantic demostró en Ignite una experiencia de demostración de Pokémon GO de prueba de concepto que se ejecuta en HoloLens 2. Fue diseñada para mostrar la visión de una nueva colaboración que se basará en la combinación y la combinación de Microsoft y Niantic. capacidades de realidad aumentada.

En la demostración, que no representa un producto de consumo, Hanke y un grupo de Pokémon en su parque favorito se unieron a Veronica Saron, gerente de marketing de productos de Pokémon GO, para luchar en una sesión compartida de realidad mixta.

La misión de Niantic es crear tecnologías que permitan a las personas socializar y explorar el mundo juntas, dijo Hanke, ya sean niños que usan Pokémon GO para explorar sus vecindarios con padres o amigos, o miles de personas reunidas en parques para festivales.

“Microsoft Mesh ofrece una forma completamente nueva de hacer eso”, dijo. “Esta noción de llevar a mis amigos virtuales conmigo mientras salgo, camino y exploro el mundo, me encanta ese concepto y estoy realmente interesado en ver qué podemos hacer con eso”.

La demostración muestra el potencial de la experiencia Pokémon GO construida en la plataforma a escala planetaria de Niantic que ha permitido a millones de personas tener experiencias de realidad aumentada en el mundo real, mejoradas con características de Microsoft Mesh que permiten a las personas estar presentes juntas en experiencias compartidas en el espacio y time y se ejecuta en HoloLens.

“Nuestra parte de esto es el trabajo de unir los mundos digital y físico, conectando los bits y los átomos para que estas experiencias puedan ser posibles utilizando la plataforma Niantic”, dijo Hanke. “Pero las conexiones sociales están realmente en el corazón de todo lo que hacemos, y las innovaciones de Microsoft Mesh simplemente lo enriquecen”.

Otra capa de conexión humana

Lune Rouge, la iniciativa con sede en Quebec fundada por Laliberté del Cirque du Soleil, también está comenzando a explorar cómo Microsoft Mesh podría permitir que las personas asistan virtualmente a conciertos, representaciones teatrales, eventos de DJ o incluso celebraciones familiares desde lugares remotos.

El proyecto Hanai World, inspirado en la palabra hawaiana que, traducida libremente, significa elegir a alguien como familia, tiene como objetivo forjar nuevas conexiones entre las experiencias de entretenimiento físico y digital.

El objetivo es crear representaciones digitales de lugares de entretenimiento en todo el mundo y capturar presentaciones en vivo con suficiente fidelidad 3D para que las personas puedan experimentar el mismo evento en persona o desde su sala de estar en realidad mixta o virtual. La plataforma seleccionaría una combinación de Lune Rouge y contenido generado por el usuario en una amplia variedad de medios y géneros.

“Sería un buen complemento para el entretenimiento en vivo”, dijo Alexandre Miasnikof, director ejecutivo de producción de Lune Rouge. “Aporta otra capa de conexión humana y brinda entretenimiento a personas que normalmente no podrían asistir a un evento, ya sea por motivos geográficos o de acceso”.

Dos amigos que viven en costas opuestas podrían unirse al mismo concierto como avatares y experimentar el espectáculo juntos, o tal vez un día, una holoportación de la abuela de alguien que vive en otro país podría interactuar con miembros de la familia en tiempo real en una reunión.

“Lo que tenemos hoy es la promesa, y no sabemos qué tan pronto podemos hacer realidad esa promesa”, dijo Miasnikof. “Pero creemos que tenemos una buena base con Microsoft Mesh y construiremos a partir de ahí”.

Ese es precisamente el objetivo, dijo Kipman: ver qué tipos de soluciones que antes se habían descartado como imposibles o que requerían demasiado tiempo para mantenerse en pie, ahora se pueden construir mucho más fácilmente con la plataforma Microsoft Mesh.

“Cuando uno piensa en lo que realmente se necesita para marcar el comienzo de un nuevo medio para la informática, tiene que hacer grandes inversiones en todo el ecosistema, que es realmente lo que ha hecho Microsoft”, dijo.

“Ahora invitamos a las personas a crear valor además de eso y beneficiarse de los años de investigación y desarrollo realmente intensos que hemos realizado para ofrecerles estas funciones de manera llave en mano”.

Relacionados