La incorporación de la inteligencia artificial (IA) en aplicaciones de realidad aumentada (AR) y realidad virtual (VR) afectará prácticamente a todas las empresas, aunque la velocidad a la que se implementan tales aplicaciones variarán según la industria.
En la primavera de 2023, Kelly Ommundsen del Foro Económico Mundial, Jefe de inclusión digital, y Jaci Eisenberg, jefe de relaciones con ex alumnos, señalaron que la integración de Genai y el Metaverse podrían crear entornos virtuales dinámicos, donde el contenido generado por IA puede adaptarse y responder Acciones de los usuarios, creando experiencias personalizadas y atractivas.
“También puede habilitar nuevas formas de arte, entretenimiento y comunicación, empujando los límites de lo que es posible en el ámbito virtual”, agregaron.
La IA, en sus muchas formas, desde el aprendizaje automático y profundo hasta la IA generativa (Genai) y sus grandes modelos de lenguaje (LLMS), respaldará la creación de entornos virtuales interactivos e inmersivos, dar sentido a los datos de sensores para los gemelos digitales, crear contenido para Las aplicaciones de metaverso y de juego, y permiten a los usuarios interactuar de muchas maneras.
Habilitará historias y reacciones interactivas de los sistemas, facilitará la creación de avatares receptivos, llenará los fondos y los espacios vacíos en los paisajes de los juegos y los entornos gemelos digitales, y permiten a los desarrolladores escalar mundos virtuales rápidamente. Los casos de uso para AI en aplicaciones de realidad extendida (XR) son realmente ilimitados.
AI y XR construyen sobre arquitectura y construcción
La IA puede apoyar las visualizaciones de fenómenos naturales mediante datos previos al procesamiento. Por ejemplo, un equipo de investigación de la Universidad de Arizona y la Universidad de Purdue está desarrollando una aplicación para dar sentido a la gran cantidad de datos que los sensores agrícolas pueden recopilar.
Los investigadores están aprovechando la IA y la realidad virtual para desarrollar VR-Bio-Talk, una plataforma que permitirá a los usuarios crear visualizaciones avanzadas y analizar los datos para comprender mejor los sistemas biológicos y las prácticas agrícolas.
“El objetivo del proyecto es crear un entorno de realidad virtual que refleje los entornos agrícolas del mundo real y se combine con un programa de inteligencia artificial”, dice la Universidad de Arizona. AI procesará y condensará los datos recopilados y luego transferirá la información a representaciones virtuales. La National Science Foundation está apoyando el proyecto con fondos de más de $ 2 millones.
Según Duke Pauli, director del Centro de Investigación de Agroecosistemas de la Universidad de Arizona, los beneficios de la plataforma podrían traducirse en la mayoría de las aplicaciones en las que los datos del sensor y la representación virtual desempeñarán un papel.
“Extraer información de los datos siempre ha requerido la experiencia en programación, pero tener la capacidad de desglosar las barreras técnicas y permitir que los usuarios conversen de forma nativa con sus datos permitirán a los investigadores centrarse más en su ciencia y generar un mayor impacto social”, dice Pauli.
En aplicaciones industriales, la combinación de IA y XR ya está cambiando de procesos. En arquitectura y construcción, el modelado de información de edificios (BIM) y el diseño asistido por computadora (CAD) han visto el uso durante décadas. Por lo tanto, la información relacionada ha existido durante mucho tiempo en un formato digital.
El proveedor líder de software de diseño Autodesk ofrece soluciones para aplicaciones de construcción, ingeniería, diseño de productos y entretenimiento. Su cartera se basa en la plataforma Core AutoCAD para el diseño asistido por computadora, el software de diseño Revit y el tándem para crear gemelos digitales. La compañía integra cada vez más aplicaciones de IA. La directora de marketing de Autodesk, Dara Treseder, señala que esta integración permite a los usuarios “automatizar tareas serviles, aumentar la creatividad y analizar información compleja”.
Autodesk también está trabajando en un esfuerzo de investigación experimental para crear aplicaciones Genai para fines de diseño y fabricación. Project Bernini está utilizando AI para generar formas tridimensionales funcionales de varios tipos de entrada, como imágenes bidimensionales, texto, vóxeles o nubes de puntos. La aplicación regresa a un esfuerzo de investigación científica para crear formas 3D. La compañía espera que la IA redefine la arquitectura, ya que los algoritmos impulsarán la eficiencia, la innovación y la sostenibilidad en la industria.
“Desde la redacción automatizada hasta las actualizaciones en tiempo real en la creación de modelado de información hasta el análisis de consumo de energía, la IA agiliza los flujos de trabajo, lo que permite a los arquitectos centrarse en crear diseños visionarios”, dice.
Diseño de cambio de ai y xr
Las aplicaciones de diseño se beneficiarán enormemente combinando AI y XR mucho más allá de la arquitectura y la construcción. Adobe ha integrado el relleno generativo de las características de IA y la expansión generativa en su software de diseño de Photoshop para permitir a los clientes usar indicaciones de texto para agregar elementos de diseño y expandir las dimensiones de imágenes, respectivamente. El ilustrador de software de gráficos de la compañía y la base de datos de imágenes de archivo también ofrecen funciones de IA.
Para promover el uso de aplicaciones basadas en IA para crear imágenes, la firma informática de IA Nvidia y Shutterstock, un proveedor de fotografías y imágenes, han ingresado a una asociación para construir un modelo para imágenes creadas por AI para aplicaciones industriales y de entretenimiento.
Otras aplicaciones buscan formas de mejorar los gemelos digitales con entornos fotorrealistas que responden instantáneamente a las acciones de los usuarios. Younite AI, por ejemplo, está aprovechando las capacidades de la IA para “crear proyectos de realidad virtual que van desde experiencias culturales e históricas hasta simulaciones y capacitación centradas en el futuro”.
Dichos entornos avanzados pueden encontrar uso para las simulaciones de escenarios y el soporte de toma de decisiones, así como las aplicaciones orientadas al consumidor, incluidos los materiales de marketing o los manuales de productos.
AI, XR y agentes inteligentes
Los agentes de IA son otra consideración para el entretenimiento y las aplicaciones comerciales orientadas al consumidor.
Genai tiene un lugar muy natural en las aplicaciones de juegos, donde tiene el potencial de crear toda una industria de apoyo. La agencia artificial ha implementado IA para desarrollar un comportamiento generativo para las aplicaciones de juego. Los fundadores apuntan a desarrolladores de juegos que utilizarán el producto de su empresa para crear una mecánica de juego sofisticada que admite la narración interactiva.
Del mismo modo, Inworld AI está desarrollando un motor de IA para aplicaciones de medios y juegos para crear “experiencias con comportamiento autónomo, narraciones y mundos en evolución que responden a cada acción”.
NTT DOCOMO también ha estado trabajando en un modelo Genai para crear caracteres no jugadores para entornos virtuales: los desarrolladores pueden usar la descripción de texto para crear estos caracteres.
Josh Rush, fundador y CEO de Surreal Events, dice: “Los agentes propulsados por IA inevitablemente jugarán un papel muy importante a escala … En el lado del desarrollo, permitirá ciclos de creación y despliegue de arte y creación de arte más barato, más barato y de mayor fidelidad. Y en el frente de gestión del canal, reducirá los costos operativos a largo plazo “.
En aplicaciones de ventas, Walmart está trabajando en una campaña minorista adaptativa que promete proporcionar experiencias de compra personal. El esfuerzo aprovechará la IA, AR y una plataforma de comercio inmersivo. Con ese fin, la compañía creó un asistente de atención al cliente habilitado para AI y Wallaby, que comprende varios LLM centrados en el comercio minorista para proporcionar experiencias orientadas al cliente. Los esfuerzos intentan llevar al por menor a situaciones en las que las compras pueden atribuirse a otras actividades en las que se dedican los consumidores, como la incrustación de ofertas en entornos de juego.
Walmart también creó Retina, una plataforma AR que utiliza AI para crear productos 3D virtuales. La aplicación permite a los consumidores acceder a la información del producto al ver estos objetos. Otro esfuerzo es explorar el uso de auriculares para visualizar muebles en varios entornos, por ejemplo.
AI y XR combinan elementos del mundo real y virtuales
Finalmente, también hay aplicaciones que destacan la capacidad de la IA para conectar aplicaciones virtuales con objetos y aspectos del mundo real. Por ejemplo, en aplicaciones automotrices, dos compañías finlandesas están buscando aprovechar la IA para crear una visión mejorada para aplicaciones automotrices y aeroespaciales.
BaseMark está desarrollando un kit de herramientas para permitir a los desarrolladores de aplicaciones automotrices crear experiencias AR a través de su tecnología de visión por computadora basada en IA. El producto Rocksolid AR de la compañía está diseñado para permitir experiencias inmersivas de realidad aumentada en cualquier exhibición en el vehículo.
Del mismo modo, Distance Technologies está utilizando IA contextual para crear experiencias de realidad mixta sin gafas. El brazo de riesgo de Alphabet, GV, ha invertido en la compañía, cuyas aplicaciones pueden proyectar letreros de Street en el parabrisas o mapas de un automóvil en la cabina de un piloto. La compañía está trabajando en una solución que puede permitir que cualquier superficie transparente se convierta en una pantalla AR, con los mercados objetivo iniciales de las industrias automotrices y aeroespaciales. También está creando experiencias XR avanzadas mediante el uso, en palabras de los fundadores, “IA contextual”, que también debería tener oportunidades de aplicación inmediatas en otras industrias.
Más experimental, pero potencialmente verdaderamente poderoso en las aplicaciones aumentadas, la IA también puede representar objetos del mundo real como elementos interactivos. Google ha desarrollado un sistema prototipo que puede transformar objetos físicos en objetos prácticamente aumentados.
El proyecto, XR-Objects, emplea LLM multimodales para crear el efecto. Los investigadores proporcionan un ejemplo de una manzana y una naranja que está en una mesa. El sistema identifica las frutas y luego proporciona un menú virtual que menciona el tipo de fruta y ofrece información sobre las frutas, permite a los usuarios comparar estas frutas, compartir la información con un amigo o agregarlos a una lista de compras.
Los investigadores señalan que las aplicaciones XR para la mayor parte tratan los entornos del mundo real como un telón de fondo pasivo, mientras que solo los elementos digitales tienen características interactivas. XR-Objects tiene la intención de remediar esa limitación fusionando objetos físicos y elementos virtuales sin problemas.
Existen preocupaciones asociadas con el uso indiscriminado de la IA para crear entornos XR y procesos relacionados, como un artículo anterior, El matrimonio irresistible de AI y XRNotas, pero los beneficios de la incrustación de aplicaciones de IA son múltiples, y la productividad aumentará sustancialmente con las visualizaciones generadas por IA y el uso de datos complementados con AI. AI y XR se combinan para crear soluciones poderosas para prácticamente todas las industrias y, con el tiempo, para cada empresa.
Martin Schwirn es el autor de “pequeños datos, grandes interrupciones: cómo detectar señales de cambio y gestionar la incertidumbre” (ISBN 9781632651921). También es asesor principal de la previsión estratégica en Business Finlandia, ayudando a las nuevas empresas y los titulares a encontrar su posición en el mercado de mañana.