Ideas Have Genomes: Benchmarking del Razonamiento sobre Linaje Científico y Generación de Ideas | Cómo la IA puede trazar la evolución de conceptos científicos | Evaluación de agentes de investigación en la síntesis de nuevos conocimientos académicos
Abstract
PROBLEMA: La generación de ideas en IA suele ser estocástica o imitativa, sin comprender de dónde vienen los conceptos previos (linaje) o cómo se han combinado históricamente. SOLUCIÓN: Este trabajo propone 'Ideas Have Genomes', un marco para evaluar cómo los LLMs razonan sobre el linaje científico y su capacidad para generar nuevas ideas basadas en la síntesis lógica de trabajos previos. METODOLOGÍA: Se construye un grafo de conocimiento de linaje a partir de miles de papers y se evalúa si el modelo puede identificar la 'ancestry' de una técnica o proponer extensiones válidas a la literatura existente. RESULTADOS: Los modelos demuestran una capacidad sorprendente para identificar conexiones directas, pero fallan al sintetizar ideas de campos muy remotos (transferencia cross-domain). RELEVANCIA: Fundamental para sistemas de IA que asisten en la investigación científica acelerada y la automatización del descubrimiento de nuevos algoritmos.