La velocidad con la que las nuevas tecnologías llegan al mercado no es nada en comparación con la velocidad con la que los investigadores talentosos encuentran formas creativas de usarlas, entrenarlas, incluso convertirlas en cosas sin las que no podemos vivir. Uno de esos investigadores es el compañero MIT Mad Alexander Htet Kyaw, un estudiante graduado que busca el doble maestría en estudios arquitectónicos en cálculo y en ingeniería eléctrica e informática.
Kyaw toma tecnologías como inteligencia artificial, realidad aumentada y robótica, y las combina con gestos, habla y reconocimiento de objetos para crear flujos de trabajo Human-AI que tengan el potencial de interactuar con nuestro entorno construido, cambiar la forma en que compramos, diseñamos estructuras complejas y hacer cosas físicas.
Una de sus últimas innovaciones es Curator AI, para la cual él y sus socios estudiantiles graduados del MIT tomaron el primer premio: $ 26,000 en productos Operai y efectivo, en la construcción de IA de la conferencia MIT AI: soluciones generativas de IA de voz, un hackaton de una semana en el MIT con presentaciones finales celebradas el otoño pasado en la ciudad de Nueva York. Trabajando con Kyaw estaban Richa Gupta (Arquitectura) y Bradley Bunch, Nidhish Sagar y Michael Won, todo del Departamento de Ingeniería Eléctrica e Informática del MIT (EEC).
Curator AI está diseñado para racionalizar las compras de muebles en línea proporcionando recomendaciones de productos conscientes de contexto utilizando IA y AR. La plataforma utiliza AR para tomar las dimensiones de una habitación con ubicaciones de ventanas, puertas y muebles existentes. Luego, los usuarios pueden hablar con el software para describir qué nuevos muebles desean, y el sistema utilizará un modelo de IA en idioma de visión para buscar y mostrar varias opciones que coincidan tanto con las indicaciones del usuario como las características visuales de la habitación.
«Los compradores pueden elegir entre las opciones sugeridas, visualizar productos en AR y usar un lenguaje natural para solicitar modificaciones en la búsqueda, hacer que el proceso de selección de muebles sea más intuitivo, eficiente y personalizado», dice Kyaw. «El problema que estamos tratando de resolver es que la mayoría de las personas no saben por dónde comenzar al amueblar una habitación, por lo que desarrollamos Curator AI para proporcionar recomendaciones inteligentes y contextuales basadas en cómo se ve su habitación». Aunque Curator AI se desarrolló para comprar muebles, podría ampliarse para su uso en otros mercados.
Otro ejemplo del trabajo de Kyaw es la estimación, un producto que él y otros tres estudiantes graduados crearon durante el hackathon del MIT Sloan Product Tech Conference en marzo de 2024. El enfoque de esa competencia fue ayudar a las pequeñas empresas; Kyaw y el equipo decidieron basar su trabajo en una empresa de pintura en Cambridge que emplea a 10 personas. Estimate utiliza AR y una tecnología AI de reconocimiento de objetos para tomar las mediciones exactas de una habitación y generar una estimación de costo detallada para un trabajo de renovación y/o pintura. También aprovecha la IA generativa para mostrar imágenes de la habitación o habitaciones como pueden verse después de pintar o renovar, y genera una factura una vez que el proyecto se complete.
El equipo ganó ese hackathon y $ 5,000 en efectivo. Los compañeros de equipo de Kyaw fueron Guillaume Allegre, May Khine y Anna Mathy, todos los cuales se graduaron del MIT en 2024 con maestros títulos en análisis de negocios.
En abril, Kyaw dará una charla TEDX en su alma mater, la Universidad de Cornell, en la que describirá la IA curadora, la estimación y otros proyectos que usan IA, AR y robótica para diseñar y construir cosas.
Uno de estos proyectos es desacoplar, para el cual Kyaw conectó AR con el reconocimiento de gestos para construir un software que toma la entrada del toque de una punta de los dedos en la superficie de un material, o incluso en el aire, para mapear las dimensiones de los componentes del edificio. Así es como surgió una escultura de arte imponente hecha de troncos de cenizas que se encuentra en el campus de Cornell.
Reconocimiento de gestos para la realidad mixta basada en la retroalimentación y la fabricación robótica de la torre de desacoplamiento
Video: Alexander Htet Kyaw
UNLOG representa la posibilidad de que las estructuras se puedan construir directamente a partir de un registro completo, en lugar de hacer que el tronco viaje a un molino de madera se convierta en tablas o dos por cuatro, luego se envíe a un mayorista o minorista. Es una buena representación del deseo de Kyaw de usar materiales de construcción de una manera más sostenible. Un artículo sobre este trabajo, «Reconocimiento gestual para la fabricación de realidad mixta basada en retroalimentación, un estudio de caso de la torre de desacopulación», fue publicado por Kyaw, Leslie Lok, Lawson Spencer y Sasa Zivkovic en las Actas de la 5ta Conferencia Internacional sobre Diseño Computacional y Fabricación Robótica, enero de 2024.
Otro sistema desarrollado por KYAW integra la simulación física, el reconocimiento de gestos y el AR para diseñar estructuras de flexión activas construidas con postes de bambú. El reconocimiento de gestos permite a los usuarios manipular los módulos de bambú digital en AR, y la simulación de física está integrada para visualizar cómo se dobla el bambú y dónde unir los polos de bambú de manera que cree una estructura estable. Este trabajo apareció en las actas de la 41ª educación e investigación en diseño arquitectónico asistido por computadora en Europa, agosto de 2023, como «flexión activa en la realidad mixta basada en la física: el diseño y la fabricación de un sistema de bambú modular reconfigurable».
Kyaw lanzó una idea similar utilizando módulos de bambú para crear estructuras desplegables el año pasado a MitDesignx, un programa MIT MAD que selecciona nuevas empresas prometedoras y proporciona entrenamiento y financiación para lanzarlas. Desde entonces, Kyaw ha fundado Bendshelters para construir los refugios de bambú modulares prefabricados y espacios comunitarios para refugiados y personas desplazadas en Myanmar, su país de origen.
«Donde crecí, en Myanmar, he visto muchos efectos diarios del cambio climático y la pobreza extrema», dice Kyaw. «Hay una gran crisis de refugiados en el país, y quiero pensar en cómo puedo contribuir a mi comunidad».
Su trabajo con Bendshelters ha sido reconocido por MIT Sandbox, PKG Social Innovation Challenge y el premio de Amazon Robotics por el bien social.
En el MIT, Kyaw está colaborando con el profesor Neil Gershenfeld, director del Centro de Bits y Atoms, y la estudiante de doctorado Miiana Smith para usar el reconocimiento de voz, la IA generativa 3D y los brazos robóticos para crear un flujo de trabajo que pueda construir objetos de manera accesible, a demanda y sostenible. Kyaw tiene títulos de licenciatura en arquitectura e informática de Cornell. El año pasado, recibió una beca SJA del Steve Jobs Archive, que proporciona fondos para proyectos en la intersección de la tecnología y las artes.
«Disfruto explorando diferentes tipos de tecnologías para diseñar y hacer cosas», dice Kyaw. «Ser parte de Mad me ha hecho pensar en cómo se conecta todo mi trabajo y ayudó a aclarar mis intenciones. Mi visión de investigación es diseñar y desarrollar sistemas y productos que permitan interacciones naturales entre humanos, máquinas y el mundo que nos rodea».
