OpenEMMA: Una nueva era en la conducción autónoma impulsada por modelos de lenguaje multimodales

La conducción autónoma ha sido un campo de intensa investigación en los últimos años, a medida que las empresas y los investigadores buscan desarrollar sistemas cada vez más capaces y seguros. Sin embargo, los desafíos asociados con la comprensión de escenarios de conducción complejos y la toma de decisiones en tiempo real han dificultado el progreso.

Recientemente, ha surgido un nuevo enfoque prometedor que aprovecha el poder de los Modelos de Lenguaje Multimodales (MLLMs) para abordar estos retos. Un ejemplo destacado de este avance es OpenEMMA, un marco de trabajo de código abierto para la conducción autónoma de principio a fin.

OpenEMMA, desarrollado por investigadores de la Universidad de Texas A&M, Cranberry-Lemon University y otras instituciones, utiliza una combinación de MLLMs y técnicas avanzadas de razonamiento para lograr una planificación de trayectorias eficiente y precisa.

La clave del enfoque de OpenEMMA radica en su uso del proceso de razonamiento en cadena de pensamiento (Chain-of-Thought). En lugar de generar directamente la trayectoria futura, el modelo primero produce representaciones intermedias como vectores de velocidad y curvatura, que luego se integran para obtener la trayectoria final. Este enfoque se inspira en la forma en que los humanos conducen, lo que le confiere una mayor interpretabilidad y alineación con el mundo real.

Además, OpenEMMA incorpora un modelo especialista visual, específicamente YOLO11n, para mejorar la detección de objetos 3D en escenarios de conducción. Esto permite al sistema percibir con precisión los elementos clave del entorno, como otros vehículos, peatones y señales de tráfico, lo que es fundamental para una conducción segura y eficiente.

Un aspecto notable de OpenEMMA es su capacidad de adaptarse a una variedad de MLLMs diferentes, como LLaVA-1.6, Llama-3.2 y Qwen2-VL. Los experimentos realizados en el conjunto de validación del conjunto de datos nuScenes demuestran que OpenEMMA supera de manera significativa a los enfoques de línea de base, lo que demuestra su efectividad, generalización y robustez.

Quizás lo más emocionante es que OpenEMMA es de código abierto, lo que lo convierte en una plataforma accesible para que la comunidad de investigación continúe explorando y mejorando los sistemas de conducción autónoma basados en MLLMs. Al compartir el código, los conjuntos de datos y los pesos de los modelos, los autores esperan acelerar el progreso en este campo emocionante.

En resumen, OpenEMMA representa un importante avance en la conducción autónoma, aprovechando los últimos avances en MLLMs y técnicas de razonamiento para lograr una planificación de trayectorias eficiente y precisa. A medida que la comunidad de investigación continúe explorando y refinando este enfoque, es emocionante imaginar el impacto que puede tener en el futuro de la movilidad autónoma.

Link al proyecto: https://github.com/taco-group/OpenEMMA

Difunde esta nota

Publicaciones Similares

  • | |

    «LA APATÍA JUDICIAL ES UNA ELECCIÓN»

    Luego del fallo de la Cámara de Apelaciones de Gral. Roca que revocó la medida cautelar que le permitía a la familia de Joaquín cultivar y elaborar el aceite de cannabis, la abuela de Joa transmitió a través de las redes un video donde contaba que la decisión de la familia era seguir cultivando más…

    Difunde esta nota
  • Hasta el lunes 18 se reciben postulaciones para cubrir cargo de Juez de Falta Suplente

    La Municipalidad de Villa Regina recuerda que hasta el lunes 18 de octubre inclusive los/as interesados/as pueden presentar sus postulaciones al concurso abierto de antecedentes para cubrir el cargo de Juez de Falta Suplente, convocado mediante Decreto 126/21. Los interesados deberán reunir los siguientes requisitos: *Poseer título de Abogado, con no menos de 2 años…

    Difunde esta nota
  • | |

    “PEGAMOS UN GRAN SALTO Y ESTAMOS CADA VEZ MÁS CERCA”

    En la 4ta fecha del Top Race el piloto reginense Facu Aldrighetti alcanzó su primer podio del campeonato, en la previa Facu había anticipado que con la nueva puesta a punto de su Mercedez Benz iba a ser más competitivo dándole pelea a los punteros de igual a igual. Y así fue, este fin de…

    Difunde esta nota
  • |

    Grabois le respondió a Jorge Macri y expuso el uso político de las acusaciones sin pruebas

     

    El diputado salió al cruce de del Jefe de Gobierno con un artículo contundente en el que no sólo rechazó las acusaciones del jefe de Gobierno porteño, sino que puso en discusión algo más profundo: el uso deliberado de la calumnia como herramienta política, la liviandad institucional con la que se lanzan imputaciones públicas y la persistente estigmatización de las organizaciones sociales.

    Por Ignacio Álvarez Alcorta para NLI

    Una acusación lanzada al aire

    El punto de partida del conflicto fue una serie de declaraciones de Jorge Macri en las que vinculó a Grabois con supuestas irregularidades en comedores comunitarios de la Ciudad de Buenos Aires. Sin denuncia judicial previa, sin expediente identificado y sin notificación formal a las organizaciones involucradas, el jefe de Gobierno optó por el camino más corto: la acusación mediática.

    Ese dato no es menor. En su artículo publicado en Infobae, Grabois remarca que ninguna de las estructuras mencionadas depende de él ni de las organizaciones que integra, y que jamás fue informado oficialmente de las supuestas irregularidades. La pregunta que queda flotando es evidente: si existían pruebas, ¿por qué no se presentaron ante la Justicia antes de amplificarlas en los medios?

    El límite entre la gestión y la difamación

    Uno de los ejes más sólidos del planteo de Grabois es la distinción entre crítica política y atribución concreta de delitos. No se trata —plantea— de un debate ideológico ni de diferencias sobre el rol del Estado, sino de imputar hechos penalmente reprochables sin respaldo probatorio.

    Desde ese lugar, el dirigente social señala que acusar públicamente a una persona de corrupción o fraude sin pruebas no es una opinión, sino una conducta tipificada por la ley. Y pone el foco en una práctica cada vez más extendida: funcionarios que reemplazan la denuncia judicial por el golpe mediático, sabiendo que el daño reputacional ya está hecho aunque luego no puedan sostener lo dicho.

    El trasfondo: disciplinar a las organizaciones

    Más allá del cruce personal, el texto deja entrever una lectura política más amplia. Para Grabois, este tipo de operaciones no buscan transparencia sino disciplinamiento: desacreditar a las organizaciones sociales que denuncian el ajuste, el vaciamiento de políticas alimentarias y el corrimiento del Estado en los barrios populares.

    En ese marco, la ofensiva discursiva del Gobierno porteño aparece menos como una auditoría genuina y más como una estrategia de construcción de enemigos internos, donde los comedores y movimientos sociales vuelven a ser presentados como sospechosos por default, mientras se evita discutir el impacto real de los recortes y la subejecución presupuestaria.

    Una respuesta que incomoda

    Grabois no sólo negó las acusaciones, sino que las devolvió con una advertencia política y jurídica: si se demuestra la falsedad de lo dicho, avanzará en acciones legales y destinará cualquier resarcimiento a fortalecer espacios comunitarios. El gesto no es casual: busca contrastar dos formas de hacer política, una basada en el señalamiento fácil y otra en la rendición de cuentas.

    En el fondo, el episodio deja una postal incómoda para Jorge Macri. Un jefe de Gobierno que acusa sin pruebas queda expuesto no sólo a un conflicto judicial, sino a una pregunta más difícil de esquivar: ¿qué tan responsable puede ser un funcionario que confunde gestión con difamación y comunicación política con imputación penal?

    N. de R.: Estaría bueno que dirigentes que tanto han bregado contra la concentración de medios, a la hora de hacer una nota de opinión, no caigan en la tentación de dársela a los mismos.

     

    Difunde esta nota
  • Regina impulsa una campaña de forestación

    La Dirección de Ambiente y Desarrollo Sustentable de la Municipalidad de Villa Regina pone en marcha una campaña de forestación para plantar 1000 árboles en la ciudad. Por esta razón se convoca a las juntas vecinales, instituciones, entidades intermedias y vecinos en general a acercarse a la oficina de la Dirección, Fray Luis Beltrán 218,…

    Difunde esta nota