Los sueños de realidad aumentada de Snapchat podrían comenzar a parecer un poco más realistas.
La compañía ha estado mejorando sutilmente sus lentes con AR cada año, mejorando las posibilidades técnicas y fortaleciendo su plataforma de desarrollo. El resultado es que hoy, más de 170 millones de personas, acceden diariamente a las funciones de realidad aumentada de la aplicación.
Hace dos años, Snap compartió que los creadores habían diseñado más de 100,000 lentes en la plataforma. Ahora Snap dice que se han creado más de 1 millón de lentes.
Los filtros tontos están atrayendo a los usuarios a la aplicación. Por su parte, la compañía está construyendo lentamente una plataforma más interconectada en torno a la realidad aumentada que comienza a parecer cada vez más prometedora.
Hoy, en el evento anual de desarrolladores de Snap, la compañía anunció una serie de actualizaciones para mejorar la realidad aumentada de Snapchat. Estas incluyen la búsqueda por voz de Lens, una actualización del modelo de aprendizaje automático para llevar a Lens Studio y un sistema AR específico para la geografía que convertirá los Snaps públicos en datos espaciales que el la empresa puede utilizar para mapear tridimensionalmente grandes espacios físicos.
Una Alexa para AR
El carrusel de lentes de Snapchat fue suficiente para deslizarse entre los filtros cuando solo había un par de docenas para trabajar. Ahora, con un millón de lentes y contando, siempre ha estado claro que las ambiciones de la realidad aumentada de Snapchat estaban sufriendo debido a problemas con la capacidad de descubrimiento.
Snap se está preparando para implementar un nuevo método de clasificación de lentes. ¿Cómo? A través de la voz. Si lo logran, la compañía tendrá un camino claro para la transición de AR solo para entretenimiento a una plataforma basada en la utilidad. En su formato actual, la nueva búsqueda por voz de la aplicación permitirá a los usuarios de Snapchat pedirle a la aplicación que le ayude a crear filtros que les permitan hacer algo único.
Es fácil ver a dónde podría ir una característica como esta si los usuarios se unieran. No obstante, los ejemplos resaltados en una sesión informativa previa a la prensa no indican exactamente que Snapchat quiere que esto se sienta como un asistente digital desde el principio.
- «Hola Snapchat, hazme el cabello rosado».
- “¡Hey, Snapchat, dame un abrazo!»
- «Hola Snapchat, llévame a la luna».
Será interesante ver si los usuarios acceden a esta funcionalidad desde el principio cuando las capacidades de los lentes están por todas partes. Sin embargo, solo construir esta infraestructura en la aplicación parece poderosa, especialmente cuando se miran las asociaciones de la compañía para la búsqueda visual con Amazon y búsqueda de audio con Shazam dentro de su función de escaneo. No es difícil imaginar pedirle a la aplicación que te permita probar el maquillaje de una compañía específica o pedirle que te muestre cómo se vería un televisor de 55″ en tu pared.
Snapchat crea nuevas asociaciones
La compañía anunció nuevas asociaciones para su búsqueda visual, en equipo con PlantSnap para ayudar a los usuarios de Snapchat a identificar plantas y árboles. Luego con Dog Scanner para permitir que los usuarios de Snap apunten con su cámara a un perro y determinar su raza. Por último, hizo equipo con Yuka para ayudar a dar calificaciones nutricionales en alimentos después de escanear la etiqueta de un artículo.
«Hoy, la realidad aumentada está cambiando la forma en que hablamos con nuestros amigos», dijo el cofundador y CTO de Snap, Bobby Murphy, en una conferencia de prensa. «Pero en el futuro, lo usaremos para ver el mundo de formas completamente nuevas».
BYO [AI]
Snap quiere que los desarrolladores traigan sus propios modelos de redes neuronales a su plataforma. ¿Para qué? Para permitir una clase de lentes más creativa y de aprendizaje automático. SnapML permite a los usuarios traer modelos entrenados y permitir a los usuarios aumentar su entorno. ¿Cómo? Creando filtros visuales que transforman las escenas de formas más sofisticadas.
Los conjuntos de datos que los creadores cargan en Lens Studio permitirán que sus lentes vean con un nuevo conjunto de ojos y busquen nuevos objetos. Snap se ha asociado con la startup AR Wannaby para darles a los desarrolladores acceso a su tecnología de seguimiento de pies para permitir lentes que les permitan a los usuarios probarse zapatillas virtualmente. Otra asociación con Prisma permite que la cámara Lens filtre el mundo al estilo de los estilos artísticos familiares.
Snap espera que al emparejar la comunidad de aprendizaje automático y la comunidad creativa, los usuarios puedan obtener acceso a algo completamente nuevo.
«Esperamos ver un tipo de lentes completamente nuevo que nunca antes hayamos visto», dijo el ejecutivo de Snap AR, Eitan Pipliski, a TechCrunch.
Snapchat comienza a mapear el mundo
Uno de los grandes anuncios del año pasado de Snap en el frente AR fue una característica llamada Landmarkers. Esta permitió a los desarrolladores crear lentes más sofisticados que aprovecharon modelos geométricos de grandes estructuras populares como la Torre Eiffel en París o el Edificio Flatiron en Nueva York para hacer geografía. Lentes específicos que jugaban con el mundo real.
La tecnología fue relativamente fácil de lograr, aunque solo sea porque las estructuras que eligieron eran tan ubicuas y los archivos 3D de sus exteriores estaban fácilmente disponibles. El próximo esfuerzo de RA de la compañía es un poco más ambicioso. Una nueva característica llamada Lentes locales permitirá a los desarrolladores de Snapchat crear lentes específicos de geografía que interactúen con una muestra más amplia de ubicaciones físicas.
«[Estamos] yendo un paso más allá, al permitir la realidad aumentada de Snapchat compartida y persistente en áreas mucho más grandes, para que pueda experimentar AR con sus amigos, al mismo tiempo, en bloques de ciudades enteras», dijo Murphy.
¿Cómo obtendrá Snapchat todos estos datos 3D en primer lugar? Están analizando instantáneas públicas que los usuarios compartieron con el feed público Our Story de la compañía. ¿Cómo? Extrayendo datos visuales sobre los edificios y estructuras en fotos. Luego estos datos son usados para crear mapas 3D de ubicaciones más precisos.
Las empresas que están interesadas en la realidad aumentada compiten cada vez más para recopilar datos 3D. El mes pasado, el fabricante de Pokémon GO, Niantic, anunció que iban a comenzar a recopilar datos 3D de los usuarios en forma voluntaria.
:)