OpenEMMA: Una nueva era en la conducción autónoma impulsada por modelos de lenguaje multimodales

La conducción autónoma ha sido un campo de intensa investigación en los últimos años, a medida que las empresas y los investigadores buscan desarrollar sistemas cada vez más capaces y seguros. Sin embargo, los desafíos asociados con la comprensión de escenarios de conducción complejos y la toma de decisiones en tiempo real han dificultado el progreso.

Recientemente, ha surgido un nuevo enfoque prometedor que aprovecha el poder de los Modelos de Lenguaje Multimodales (MLLMs) para abordar estos retos. Un ejemplo destacado de este avance es OpenEMMA, un marco de trabajo de código abierto para la conducción autónoma de principio a fin.

OpenEMMA, desarrollado por investigadores de la Universidad de Texas A&M, Cranberry-Lemon University y otras instituciones, utiliza una combinación de MLLMs y técnicas avanzadas de razonamiento para lograr una planificación de trayectorias eficiente y precisa.

La clave del enfoque de OpenEMMA radica en su uso del proceso de razonamiento en cadena de pensamiento (Chain-of-Thought). En lugar de generar directamente la trayectoria futura, el modelo primero produce representaciones intermedias como vectores de velocidad y curvatura, que luego se integran para obtener la trayectoria final. Este enfoque se inspira en la forma en que los humanos conducen, lo que le confiere una mayor interpretabilidad y alineación con el mundo real.

Además, OpenEMMA incorpora un modelo especialista visual, específicamente YOLO11n, para mejorar la detección de objetos 3D en escenarios de conducción. Esto permite al sistema percibir con precisión los elementos clave del entorno, como otros vehículos, peatones y señales de tráfico, lo que es fundamental para una conducción segura y eficiente.

Un aspecto notable de OpenEMMA es su capacidad de adaptarse a una variedad de MLLMs diferentes, como LLaVA-1.6, Llama-3.2 y Qwen2-VL. Los experimentos realizados en el conjunto de validación del conjunto de datos nuScenes demuestran que OpenEMMA supera de manera significativa a los enfoques de línea de base, lo que demuestra su efectividad, generalización y robustez.

Quizás lo más emocionante es que OpenEMMA es de código abierto, lo que lo convierte en una plataforma accesible para que la comunidad de investigación continúe explorando y mejorando los sistemas de conducción autónoma basados en MLLMs. Al compartir el código, los conjuntos de datos y los pesos de los modelos, los autores esperan acelerar el progreso en este campo emocionante.

En resumen, OpenEMMA representa un importante avance en la conducción autónoma, aprovechando los últimos avances en MLLMs y técnicas de razonamiento para lograr una planificación de trayectorias eficiente y precisa. A medida que la comunidad de investigación continúe explorando y refinando este enfoque, es emocionante imaginar el impacto que puede tener en el futuro de la movilidad autónoma.

Link al proyecto: https://github.com/taco-group/OpenEMMA

Difunde esta nota

Publicaciones Similares

  • | | |

    PURO HUMO

    Cómo si fuera parte de la identidad reginense, está ahí, se sostiene en el cielo, antigravitacional. Señal olfativa vigente. Nos acompaña todos los días del año, cómo el indio Comahue. Inamovible. Parte de nuestra historia. La ciudad se tiñe de un espeso gris por largas horas de nuestras vidas. Poluta todo el día. Visible de…

    Difunde esta nota
  • Apertura de sobres de la licitación pública 04/2021

    En la mañana de este viernes 23, se llevó a cabo la apertura de la licitación pública Nº 04/2021 correspondiente al mantenimiento y recambio de luminarias a tecnología LED, provisión de materiales, equipos y mano de obra para el sector centro, calle Juan XXIII, calle Las Heras, Avenida Belgrano, Avenida Mitre, Avenida Cipolletti, calle Brown…

    Difunde esta nota
  • Comenzó el curso de ‘Alfabetización Digital’

    El viernes 25 comenzó el curso ‘Alfabetización Digital’ destinado al Consejo Local de Discapacidad local. Desde la Dirección de Recursos Humanos de la Municipalidad de Villa Regina, a través de Punto Digital, se informó que “este programa de inclusión digital busca brindar herramientas en la introducción a los conceptos básicos y fundamentales de la informática,…

    Difunde esta nota
  • Suspendidos los actos conmemorativos italianos

    Con motivo de la celebración del 74° Aniversario de la República de Italia (02 deJunio), y del día del Inmigrante Italiano (03 de Junio) el Agente Consular Honorariode Italia en Villa Regina, Martín Vesprini, informa que por instrucciones precisas delConsulado General de Italia en Bahía Blanca SE ENCUENTRAN SUSPENDIDOStodos los actos Oficiales conmemorativos que se…

    Difunde esta nota
  • |

    Nuestra Señora de Banneux, la Virgen de los Pobres que habló desde el margen

     

    En plena crisis económica europea y en un pequeño pueblo obrero de Bélgica, una advocación mariana surgió con un mensaje austero, directo y profundamente social. Nuestra Señora de Banneux, reconocida por la Iglesia en 1949, se presentó como “la Virgen de los Pobres” y dejó una huella religiosa que, con el paso del tiempo, adquirió también una fuerte lectura histórica y social.

    Por Alcides Blanco para NLI

    En el invierno de 1933, Europa todavía arrastraba las consecuencias devastadoras de la Primera Guerra Mundial y se encontraba hundida en la Gran Depresión. En ese contexto de pobreza estructural, desempleo y exclusión, una niña belga de once años, Mariette Beco, afirmó haber sido testigo de una serie de apariciones marianas en la localidad de Banneux, cerca de Lieja.

    Las apariciones se extendieron entre el 15 de enero y el 2 de marzo de 1933, sumando un total de ocho encuentros. Según el relato de la niña, la Virgen se presentó con vestimentas sencillas y sin ornamentos, y pronunció una frase que marcaría definitivamente esta advocación: “Yo soy la Virgen de los Pobres”.

    Un mensaje austero en tiempos de miseria

    A diferencia de otras apariciones marianas más cargadas de advertencias apocalípticas o llamados penitenciales, el mensaje de Banneux fue sobrio, breve y profundamente humano. La Virgen pidió oración, especialmente por los enfermos, y señaló una fuente de agua que, según sus palabras, estaba destinada a “todas las naciones”.

    Esa fuente —aún hoy centro de peregrinación— no fue presentada como un objeto milagroso inmediato, sino como un signo de consuelo, cuidado y esperanza, en un mundo atravesado por la escasez. En ese gesto simbólico, la Iglesia leyó con el tiempo una fuerte conexión entre fe y realidad social.

    No es un dato menor que Mariette Beco provenía de una familia trabajadora y empobrecida, en una región industrial golpeada por el cierre de fábricas y la precarización laboral. El contexto social fue considerado clave por los investigadores eclesiásticos al evaluar la autenticidad del testimonio.

    Reconocimiento oficial y proyección social

    Tras años de análisis, interrogatorios y estudios teológicos, en 1949 la Iglesia católica reconoció oficialmente las apariciones de Banneux como dignas de fe. Desde entonces, el lugar fue elevado a santuario mariano internacional, con una particularidad: su pastoral quedó orientada de manera explícita hacia los pobres, los enfermos y los descartados.

    Nuestra Señora de Banneux se convirtió así en una advocación no asociada al poder ni al esplendor, sino a la fragilidad humana. Lejos de palacios o centros de decisión, su mensaje emergió desde el margen, en un rincón olvidado de Europa, y dialogó con una época marcada por la desigualdad.

    Con el paso del tiempo, la figura de la Virgen de los Pobres fue recuperada por sectores del cristianismo comprometidos con la doctrina social de la Iglesia, la opción preferencial por los pobres y una lectura crítica del orden económico dominante.

    En Banneux no hubo promesas de grandeza ni advertencias espectaculares. Hubo, en cambio, una afirmación sencilla y contundente: la fe cristiana no puede desentenderse del sufrimiento material. Ese es, quizás, el legado más incómodo y a la vez más vigente de esta advocación mariana.

     

    Difunde esta nota
  • |

    PROPUESTAS Y ACTIVIDADES DEPORTIVAS EN LA PLAZA DE LOS PRÓCERES

    En la plaza de los próceres se llevará a cabo a partir de las 18hs del miércoles 6 de abril un evento repleto de actividades deportivas al aire libre por el dia mundial de la actividad física. El día 6 de abril, se celebra el Día Mundial de la Actividad Física y la Dirección de…

    Difunde esta nota