Desarrolla realidad aumentada con la API de ARCore Depth

ARCore ha integrado características de oclusión para la realidad aumentada.

El encargado de la plataforma de Realidad Aumentada de Google, Rajat Paharia, presentó en el blog de desarrolladores de Google la API de ARCore.

ARCore es una plataforma de desarrolladores para crear experiencias de realidad aumentada (AR). Ellos se han centrado en proporcionar una API que ayuden a los desarrolladores a combinar a la perfección el mundo físico con el mundo digital.

A fines del año pasado, el equipo de Google ofreció una vista preliminar de la API de profundidad ARCore, que utiliza algoritmos de profundidad de movimiento para generar un mapa de profundidad con una sola cámara RGB. Desde entonces, el equipo de AR de Google ha estado trabajando con colaboradores selectos para explorar cómo se puede usar la profundidad en una variedad de casos de uso para mejorar el realismo AR.

Recientemente, Google anunció que la API de profundidad está disponible en ARCore 1.18 para Android y Unity, incluida AR Foundation, en cientos de millones de dispositivos Android compatibles.

¿Qué puedes hacer con la API de ARCore Depth?

Genera un mapa de profundidad sin hardware especializado para desbloquear capacidades como la oclusión.

Google destacó el año pasado que una capacidad clave de la API de profundidad es la oclusión: la capacidad de los objetos digitales de aparecer con precisión detrás de los objetos del mundo real. Esto hace que los objetos se sientan como si realmente estuvieran en su espacio, creando una experiencia AR más realista.

Illumix, el estudio de juego detrás de Five Nights at Freddy’s AR: Special Delivery, utiliza la oclusión para profundizar el realismo de la experiencia al permitir que ciertos personajes se escondan detrás de los objetos para obtener más sobresaltos.

Juega Five Nights en Freddy’s AR: Special Delivery

Si bien la oclusión es una capacidad importante, la API ARCore Depth desbloquea más formas de aumentar el realismo y permite nuevos tipos de interacción.

El Laboratorio de profundidad ARCore estimuló más ideas sobre cómo se puede usar la profundidad, incluida la física de la realidad, las interacciones de la superficie, el recorrido ambiental y más. Los desarrolladores ahora pueden construir sobre estas ideas a través del proyecto de código abierto GitHub.

Los diseñadores e ingenieros de Snap Inc. integraron varias de estas ideas en un conjunto de lentes Snapchat, incluido Dancing Hotdog y una nueva lente submarina exclusiva para Android.

Vea cómo la profundidad puede agregar una capa de realismo a su experiencia de Snapchat

Los creadores de filtros de Snapchat ahora pueden descargar una plantilla de API de profundidad ARCore para crear experiencias basadas en profundidad para dispositivos Android compatibles. Sam Hare, Gerente de Ingeniería de Investigación en Snap Inc, expresó su entusiasmo: “Estamos comenzando a comprender qué tipos de capacidades de profundidad son emocionantes para los desarrolladores para construir. Este único punto de integración simplifica el proceso de desarrollo y permite a los desarrolladores de Lens Studio aprovechar fácilmente las capacidades más avanzadas de profundidad “.

Otra aplicación que combina la oclusión con otras capacidades de profundidad es Lines of Play, un experimento de Android del Laboratorio creativo de Google. Lines of Play permite a los usuarios crear arte dominó en AR y utiliza información de profundidad para mostrar tanto la oclusión como las colisiones. Diseña elaboradas creaciones de dominó, derrótalas y observa cómo chocan con los muebles y las paredes de tu habitación.

Observe cómo las piezas de dominó se derrumban entre sí y en sus paredes con Lines of Play

Además de los juegos y la autoexpresión, la profundidad también se puede usar para desbloquear nuevos casos de uso de utilidades. Por ejemplo, la aplicación TeamViewer Pilot, una solución de asistencia remota que permite las anotaciones AR en las videollamadas, utiliza la profundidad para comprender mejor el entorno para que los expertos de todo el mundo puedan aplicar con mayor precisión las anotaciones 3D AR en tiempo real para soporte y mantenimiento remotos.

Las anotaciones en 3D ayudan a los expertos a resaltar con precisión los detalles en la aplicación TeamViewer Pilot

A finales de este año, los desarrolladores podrán probar experiencias AR más profundas, como SKATRIX by Reality Crisis y SPLASHAAR by ForwARdgames, que utilizan interacciones de superficie y recorrido ambiental a medida que hacen un uso intensivo del entorno que lo rodea.

https://twitter.com/SkatrixGame/status/1279446107320270851
Echa un vistazo a las interacciones de la superficie y el recorrido ambiental en SKATRIX y SPLASHAAR

Si bien los sensores de profundidad, como los sensores de tiempo de vuelo (ToF), no son necesarios para que la API de profundidad funcione, tenerlos mejorará aún más la calidad de las experiencias. El Dr. Soo Wan Kim, Gerente de Producto Técnico de Cámara en Samsung comentó sobre el futuro que la API de Profundidad y ToF desbloquea diciendo: “La Profundidad enriquecerá la experiencia de AR del usuario en muchas perspectivas. Reducirá el tiempo de exploración y puede detectar planos rápidamente, incluso planos de baja textura. Esto brindará experiencias fluidas a los usuarios que podrán usar las aplicaciones AR de manera más fácil y frecuente “. En los próximos meses, Samsung actualizará su aplicación Quick Measure para usar la API ARCore Depth en Galaxy Note10 + y Galaxy S20 Ultra.

Mide con precisión con Quick Measure

Para obtener más información y comenzar con la API de profundidad de ARCore, obtenga el SDK y visite el sitio web para desarrolladores de ARCore.