El Próximo Salto del Vision Pro: visionOS 2 Desbloquea el Seguimiento de Objetos 3D para una AR Mejorada

Apple anunció oficialmente visionOS 2 en su Worldwide Developers Conference (WWDC24) el 10 de junio de 2024. Entre las mejoras significativas se encuentra una capacidad completamente nueva: el seguimiento de objetos 3D. Esta función permite que el Vision Pro identifique e interactúe con objetos físicos específicos en el entorno de un usuario, yendo más allá del seguimiento de imágenes 2D disponible desde el lanzamiento del dispositivo.

UploadVR informa que este seguimiento avanzado, junto con mejoras en el seguimiento de manos y la comprensión general de la escena, no se destacó en la conferencia principal de la WWDC24. En cambio, los detalles surgieron de sesiones para desarrolladores puestas a disposición en línea por los ingenieros de Apple. Según UploadVR, el Vision Pro anteriormente solo podía seguir 'imágenes 2D específicas, como marcadores y tableros de juego', pero visionOS 2 lo extiende a elementos físicos tridimensionales.

El medio clarifica el proceso para los desarrolladores, explicando que deben proporcionar modelos 3D (formato USDZ) de los objetos a seguir. Estos modelos se procesan luego a través de la herramienta Create ML de Apple durante la compilación de la aplicación en una Mac. Este entrenamiento genera una red neuronal para cada objeto, la cual se incrusta dentro de la propia aplicación. Señalan que esto significa que los usuarios no pueden rastrear objetos arbitrarios propios, y añadir nuevos objetos requiere una actualización de la aplicación.

UploadVR sugiere que esta funcionalidad promete mucho, particularmente para 'casos de uso en negocios y educación, o incluso para exposiciones como museos'. El artículo describe cómo visionOS proporciona un cuadro delimitador con escala y orientación precisas para cada objeto reconocido, permitiendo a los desarrolladores anclar contenido virtual directamente a ellos o aumentarlos con efectos digitales. La publicación expresa gran interés en 'lo que los desarrolladores de visionOS terminen construyendo' con esta nueva capacidad, que caracteriza como la que permite una 'verdadera aumentación de objetos específicos en su espacio, no solo del entorno'.

Nuestra opinión: Este seguimiento de objetos 3D es un paso crítico hacia adelante para las capacidades de realidad aumentada del Vision Pro. Si bien la implementación actual requiere objetos preespecificados, lo que limita la interacción espontánea, sienta las bases para experiencias de AR más sofisticadas en los sectores industrial, educativo e incluso minorista. Hemos estado siguiendo la lenta pero constante convergencia de las realidades digitales y físicas, y esta actualización confirma el compromiso de Apple de habilitar una computación espacial más profunda e interactiva. Es probable que futuras iteraciones aborden la limitación del seguimiento de objetos definidos por el usuario, pero por ahora, esto proporciona un marco robusto para aplicaciones de AR dedicadas.