S-Agent: El Uso de Herramientas Espaciales Fomenta la Inteligencia Espacial | Razonamiento espacial en agentes mediante interacción con herramientas | Framework para dotar a los LLMs de comprensión del mundo físico 3D

Abstract

PROBLEMA: Los LLMs actuales, a pesar de su gran capacidad verbal, carecen de una comprensión intrínseca del espacio físico, lo que limita su utilidad en robótica y diseño. SOLUCIÓN: Desarrollan S-Agent, un sistema donde el uso de herramientas espaciales (como simuladores y calculadoras geométricas) fomenta el razonamiento sobre la inteligencia espacial. METODOLOGÍA: El agente es entrenado para descomponer problemas espaciales complejos en llamadas a herramientas técnicas que manipulan representaciones 3D. RESULTADOS: S-Agent supera a modelos base en benchmarks de razonamiento espacial (como ScanNet) al transformar descripciones textuales en modelos mentales precisos. RELEVANCIA: Crucial para la convergencia entre modelos de lenguaje y aplicaciones del mundo real que requieren precisión geométrica y espacial.