Un marco y leaderboard para la evaluación de pipelines de recuperación en ViDoRe v3

Se ha lanzado un nuevo marco de evaluación y leaderboard para pipelines de recuperación complejos en el benchmark ViDoRe v3, enfocado en tareas de recuperación visual de documentos. El artículo discute componentes clave como OCR versus modelos visión-lenguaje, motores de búsqueda dispersos o densos, capas de refinamiento con re-rankers y agentes de recuperación. ViDoRe v3 evalúa sistemas reales con datos empresariales de dominios como energía, finanzas y farmacéutica. El leaderboard público en Hugging Face compara precisión, latencia de indexación y búsqueda. Proporcionan un framework simple para implementar y evaluar nuevas pipelines, fomentando innovaciones en RAG.