enterrado dentro Vision Pro de Apple por 3.499 dólares Los cascos de realidad virtual son una característica que me fascina constantemente, pero probablemente nunca hayas oído hablar de ellos. Características, llamadas personalidadInvolucra a dos o más usuarios, todos usando Vision Pro, conversando entre sí en tiempo real pero como réplicas virtuales.
Ahora en versión beta, Personas es parte del sistema de avatar de Apple para Vision Pro, que se replica a sí mismo mediante un escaneo de fotografías en 3D.
Escanearse a sí mismo no es nada nuevo. Hace unos cinco años, probé la telepresencia con avatares escaneados en 3D con gafas Nreal AR con una empresa llamada Spatial. Eché un vistazo al avatar códec realista de Meta. Exploré la telepresencia de avatares de dibujos animados con Microsoft en HoloLens. Incluso me escaneé en busca de todo tipo de extraños deepfakes de IA usando la aplicación de teléfono Sora de OpenAI.
Aún así, nadie está haciendo nada tan avanzado en auriculares o gafas de realidad virtual o realidad aumentada como Vision Personas de Apple. Y no hemos visto el comienzo de lo bien que podrían ponerse las cosas.
Para obtener más información, me puse un auricular M5 Vision Pro y me subí a FaceTime para una charla exclusiva con el director senior del grupo de productos Vision de Apple, Jeff Norris, y el director senior de marketing de productos, Steve Sinclair. Ambos se presentaron personalmente en la oficina de mi casa. Cuando empezó la reunión deambulamos como fantasmas, cara a cara, para hablar. Después de unos minutos, sentí como si estuviéramos pasando tiempo juntos en persona.
Apple no habla del futuro. Pero Norris y Sinclair explican una excelente tecnología 3D que hace que las Personas parezcan realistas. Mientras conversábamos, imaginé que se podría realizar un escaneo similar en otros lugares además de Vision Pro, como su iPhone, que sería accesible para más personas.
Los auriculares Personas de Apple parecen inusuales por fuera, pero no por dentro.
La telepresencia real es una magia cara
Es difícil encontrar otra persona que tenga Vision Pro, pero cuando yo lo tengo, la extraña sensación de un fantasma entrando a mi casa es mágica. VisionOS de Apple ha evolucionado para permitir la colaboración entre Personas, flexionando el espacio virtual para que hasta cinco personas vean y compartan objetos virtuales y aplicaciones juntas. Varias personas que usen auriculares Vision en la misma habitación pueden colaborar con Personas, que también pueden transmitir de forma remota.
Yo, al igual que Tony Stark, he soñado durante años con la idea de la telepresencia con hologramas de Star Wars. Básicamente está aquí. Sólo tiene paredes con herrajes muy caros.
Las gafas inteligentes aún no han podido manejar tales cargas de avatar, aunque las gafas AR de Snap y otros pronto lo intentarán. Mi pregunta para Apple es: ¿Qué tecnología Personas está sucediendo? ¿Puede aparecer en otros lugares?
La tecnología de escaneo de salpicaduras utiliza el aprendizaje automático
En nuestra reunión, Norris explicó que la tecnología Persona utiliza salpicaduras gaussianas para crear escaneos faciales en 3D increíblemente creíbles. La dispersión gaussiana es actualmente la tecnología central de muchas aplicaciones 3D, a menudo aplicada al escaneo de objetos o entornos a gran escala. La aplicación Hyperscape Capture de Quest Meta puede escanear habitaciones enteras en espacios transitables en 3D en realidad virtual, por ejemplo. Utiliza IA para crear un paisaje a partir de una imagen 3D o una serie de imágenes 2D.
Lo que hace que Personas sea único es el enfoque en escanearse a usted mismo en lugar de a su entorno. Usando VisionOS 26, Norris me mostró los cambios clave con respecto a versiones anteriores de Persona. Los renderizados ahora pueden mostrar más detalles en múltiples ángulos y capturar detalles como joyas y pestañas. Los cuerpos y las caras se escanean juntos, lo que hace que el renderizado parezca más fluido.
“El aprendizaje automático está involucrado, pero mucha gente no entiende realmente que es un concierto de redes que se unen”, dijo Norris. “Los contamos, son más de una docena, pero en realidad redujimos el número cuando pasamos a esta nueva versión de Personas”.
Mencioné la posibilidad de escanear habitaciones en Vision Pro en el futuro (aplicaciones como Scanverse y Polycam ya muestran escaneos 3D en los auriculares). Norris dice que Apple ya está aplicando salpicaduras gaussianas a transformaciones espaciales 3D de fotografías, que ahora parecen extrañamente inmersivas en los auriculares. Entonces, ¿qué sigue?
Los auriculares Vision Pro pueden colaborar en el mismo espacio y integrarse en Personas desde otros lugares al mismo tiempo. Necesitas tener uno de esos auriculares para participar en la experiencia espacial.
No hace falta mucho para tomar las fotografías necesarias. ¿Se puede hacer en iPhone?
Si bien Persona Scan se realiza a través de los auriculares de Vision Pro, lo que requiere que gire la cabeza y sostenga los auriculares para escanear, no es un proceso que requiera que use los sensores de Vision Pro de manera extensiva.
“Solo necesitamos unas pocas imágenes cuando documentamos tu personalidad”, me dice Norris. “Estos incluyen algunas expresiones faciales que ayudan a nuestras redes a comprender cómo se mueve tu cara cuando hablas y sonríes”. Y eso es todo”.
Me pregunto si un iPhone podría eventualmente escanear una Persona, lo cual me parece mucho más fácil que usar Vision Pro. Norris no responde directamente.
“Es interesante imaginar diferentes maneras de lograrlo”, respondió. “Pero ahora mismo, nos gusta que sea autónomo en el dispositivo y que todo el procesamiento ocurra en el dispositivo. Ninguna de estas imágenes tiene que ir a ninguna parte para que eso suceda”.
Yo en mi VisionOS Persona durante mi primera demostración de la nueva versión en la WWDC a principios de este año.
¿Qué podría significar esto para nuestro futuro sentido de identidad virtual?
La persona única que escaneo y vinculo a mi ID de Apple en Vision Pro parece diseñada para actuar como un mapeo uno a uno para mi yo virtual. Es lo más parecido que tiene Apple a usar una cámara para transmitir mi rostro real, lo cual no se puede hacer cuando uso auriculares.
Las empresas de inteligencia artificial ya están escaneando y creando, intencionalmente o no, versiones virtuales de un número creciente de personas deepfake. Aplicación Sora de OpenAI Este es ahora el ejemplo más destacado y utiliza la misma tecnología de escaneo facial del iPhone para crear un “cameo” de mí mismo que puedo dárselo a los demás.
Le pregunto a Norris dónde podría ir la línea. Deja claro que Apple quiere representar de forma clara y segura a una persona en tiempo real, no como una reproducción.
“Nos centramos en el individuo, buscando esa representación auténtica”, dice. “Estamos tratando de satisfacer lo que creo que es un deseo humano básico, que es: ‘Ojalá estuvieras aquí’. Comienza tratando de ser fieles a nuestra apariencia, a cómo nos movemos y a cómo somos emocionales mientras hablamos”.
¿Puedo tener múltiples personalidades o múltiples personalizaciones?
En este momento, Apple te limita a usar un escaneo de Persona a la vez, lo cual me sorprende. Me encanta la variedad de avatares de Scott Stein en diferentes estados de ánimo o con diferentes atuendos. Si bien Apple no explora la transformación de la identidad mediante el escaneo, aprecio las opciones de gafas realistas y me encantaría poder agregar más accesorios.
“La gente puede volver a inscribirse o simplemente ponerse una camiseta diferente y volver a inscribirse”, dijo Norris. “Puedo entender totalmente por qué eso sería algo que querríamos. Pero ahora sólo nos estamos centrando en uno”.
Intenté usar avatares escaneados con gafas Nreal AR en 2020 usando una aplicación de Spatial que puede usar el teléfono y los auriculares juntos. ¿Apple también hará lo mismo?
¿Personas alguna vez se expandirá más allá de Vision Pro?
Ya estoy pensando en más opciones para Personas, no sólo para los costosos auriculares de Apple, sino también para iPhones y otros dispositivos.
¿Y si pudieran ser sustitutos personales de nuestras llamadas Facetime? Ya puedo llamar a mi esposa por FaceTime desde Vision Pro y ella puede ver mi personaje 2D allí. Se ríe de esto porque parece un poco sobrenatural. Si Apple ya abrió tantas puertas con Animoji en FaceTime, ¿por qué no Personas?
Norris insiste en que Personas Vision funciona mejor con auriculares, con lo cual estoy de acuerdo. Las representaciones parecen más creíbles, de alguna manera. Cuando nos situamos en entornos que ya están compuestos a medias por objetos virtuales, estas identidades escaneadas en 3D parecen más naturales. Pero la distancia física y la expresión corporal también pueden ocurrir en el espacio. Los individuos pueden salir de sus cajas y moverse como torsos, brazos y caras.
“Puedo contar un chiste y lo entenderás porque verás mi lenguaje corporal y mis expresiones faciales que no puedes ver en una pantalla bidimensional”, dice Sinclair. “Aquí estamos juntos en la habitación y se siente como si realmente estuviéramos aquí”.
Mientras su personaje en esa forma virtual estaba junto a mi escritorio desordenado, supe que tenía razón.
Apple ya está recibiendo comentarios sobre esto para uso empresarial. “También escuchamos sobre esto en el sector de la atención médica”, dice Norris. “Médicos que desarrollan procedimientos y quieren capacitar a otras personas. No tienen que viajar por todo el país. Pueden simplemente tener una llamada FaceTime con su gente”.
Todavía veo un futuro en el que iPhones, iPads, portátiles y auriculares funcionen juntos, alguna empresa Como Microsoft Y Qualcomm Diseñado como un puente entre los auriculares y los dispositivos de pantalla plana. Samsung y Google Estos puntos de conexión también se están discutiendo con Android XR. manzana Hay un ARKit En iPhones y iPads, la posibilidad ya existe.
Norris dice que a Personas le faltará algo fuera de los auriculares en este momento. “Para apreciar plenamente la experiencia, es necesario tener capacidades de detección y capacidades de visualización increíbles. Realmente tienen que unirse para crear un momento tan mágico”.
Esa visión podría evolucionar a medida que Apple avance hacia una esperada línea de gafas inteligentes en el futuro e, inevitablemente, iPhones y iPads más avanzados. La personificación es el comienzo de un cambio fundamental en la forma en que gestionamos la colaboración y la conexión.
Por ahora, sin embargo, nunca lo experimentarás a menos que estés dentro de un Vision Pro. Espero que llegue el momento en que las entradas a este mundo mágico de telepresencia sean mucho más asequibles y estén mejor distribuidas, para que más personas puedan subir a bordo.
En este punto, mi personalidad soy básicamente yo mismo. Ojalá pudiera tener compañía más a menudo.
No se pierda nuestro contenido tecnológico imparcial y reseñas basadas en laboratorio. Añadir CNET Como fuente preferida de Google.
