TL;DR
- Meta ha introducido una nueva forma de mapear digitalmente una habitación, llamada SceneScript.
- SceneScript puede identificar automáticamente objetos y características de la habitación, como paredes, sofás y mesas, con la ayuda de IA.
- Los LLM pueden utilizar los datos resultantes para responder preguntas sobre la sala.
Meta ha presentado un nuevo método para escanear una habitación llamado SceneScript. Esta nueva forma de escanear habitaciones podría hacer que el proceso sea más rápido y sencillo. Auriculares de búsqueday también podría tener otras implicaciones útiles.
Antes de usar un visor de realidad virtual, se recomienda escanear la habitación para poder establecer límites. De esta manera no tendrás que preocuparte por chocar con varios objetos ya que tu visión se verá oscurecida. El escaneo de habitaciones también se utiliza para AR para anclar y alinear con precisión el contenido 3D con el espacio interior en el que se encuentra. Sin embargo, la forma actual en que se realiza el escaneo de habitaciones puede ser un poco compleja y poco amigable para el usuario.
en un detallado Publicación de hilos, Edward Miller, director de proyectos de Meta Research, presentó SceneScript, cuyo objetivo es resolver este problema. Según Miller, la tecnología utiliza inteligencia artificial para identificar automáticamente objetos y características de la habitación, como paredes, sofás, mesas, techos y más. Entonces, en lugar de tener que mapear estas cosas manualmente, la IA lo hace por usted mientras mira a su alrededor.
Visión Pro de Apple También es capaz de mapear automáticamente una habitación. Sin embargo, los auriculares no pueden identificar ni etiquetar objetos como lo hace SceneScript.
Además de hacer el trabajo de mapeo de la sala por usted, Miller dice que los datos se pueden usar con chatbots como Llama 2 para plantear preguntas sobre el área. Por ejemplo, el usuario podría preguntar «¿Cuántos botes de pintura se necesitarían para pintar esta habitación?» Es de suponer que Llama 2 podría responder estas preguntas si decide compartir los datos de la habitación con el LLM.
en un entrada en el blog, Meta dice que SceneScript podría «desbloquear casos de uso clave tanto para auriculares MR como para futuras gafas AR», como proporcionar navegación paso a paso para personas con discapacidad visual. La compañía también afirma que la tecnología podría «liberar el potencial de los asistentes digitales de próxima generación, proporcionándoles el contexto del mundo físico necesario para responder consultas espaciales complejas».
Meta no dice si llevará la tecnología al Meta Quest 3 o al Meta Quest 3 Lite entrante. Pero esta sería una gran mejora para la función Guardian de los auriculares.
