Guide Labs presenta un nuevo tipo de LLM interpretable

Guide Labs, una startup de San Francisco fundada por Julius Adebayo y Aya Abdelsalam Ismail, ha lanzado en código abierto Steerling-8B, un modelo de lenguaje grande de 8 mil millones de parámetros con una arquitectura diseñada para hacer sus acciones fácilmente interpretables. Cada token generado por el modelo puede rastrearse hasta sus orígenes en los datos de entrenamiento, facilitando la comprensión de referencias factuales, humor o conceptos como género. Esta aproximación resuelve problemas de opacidad en modelos actuales, requiriendo más anotación inicial pero usando IA para escalar. La compañía afirma que alcanza el 90% del rendimiento de modelos existentes con menos datos y planea modelos más grandes y acceso API. Es crucial para industrias reguladas y aplicaciones científicas como el plegado de proteínas.