UD3 · Sesión 7 de 12
Validación: particiones y validación cruzada
Modelos de Aprendizaje Automático · Evaluación y mejora de modelos · 15 h teóricas / 25 h prácticas
Por qué importa
El esquema de validación se decide a partir de la estructura del dato y de cómo se usará el modelo, no por costumbre.
Casi todas las diferencias entre la métrica de desarrollo y la de producción proceden de un esquema de validación que no reproduce la situación real de uso. Agrupar por cliente, respetar el orden temporal o excluir duplicados cambia la métrica en varios puntos. Es el punto del proyecto donde una decisión de diez minutos evita meses de discusión sobre por qué el modelo 'ha dejado de funcionar'.
Al terminar esta sesión sabrás
- Diseñar un esquema de validación adecuado al problema.
- Evitar la fuga a través de la partición.
- Estimar la incertidumbre de la métrica.