¿En qué apartado del BOE se publica este texto?
350 textos del BOE de julio y agosto de 2026, 50 por apartado. Al modelo se le da el cuerpo del texto, sin título. La respuesta correcta es la sección en que lo publicó el propio BOE. Los modelos ajustados se entrenaron con textos de enero a junio de 2026, sin ver nunca el periodo de prueba. El log-loss mide cómo reparte el modelo la probabilidad: cuanto más bajo, mejor.
Qué dice
Acierto por apartado
Aciertos sobre 50 en cada apartado. En verde, el mejor de cada fila.
Dónde se equivoca cada uno
Cuánto cuesta el ajuste
Medido por el propio entrenador de Kev. Antes hay que descargar los textos: los 1.400 de entrenamiento tardaron unos 27 minutos, a una petición por segundo.
Control: ¿olvida lo que ya sabía?
Preguntas ajenas al BOE, antes y después del ajuste: 560 en inglés (las 12 pruebas y 440 del conjunto de prueba con el que se publica Kev: noticias, reseñas, consultas, inferencia…) y 150 en español (XNLI, PAWS-X y reseñas de Amazon). Se mira si acierta lo mismo y si su seguridad sigue siendo de fiar: de las respuestas que da con un 90 % o más, cuántas fallan.
Las 12 pruebas del laboratorio, por separado:
Recalibración
El ajuste deja al modelo demasiado seguro. Se corrige con una temperatura, un número que suaviza las probabilidades sin cambiar la respuesta, ajustada con 400 casos que no se usan para nada más: 140 textos del BOE de septiembre, 200 generales y 60 en español. En el 4B se escribió en el modelo; en el 0.8B no, porque una sola temperatura no le basta.
Fuente de los datos: Agencia Estatal Boletín Oficial del Estado (boe.es), datos abiertos. Textos y resultados de esta página: CC BY-SA 4.0.