Validación y control de cambios de los datos

Cambiar los datos de entrenamiento cambia lo que el modelo aprende, y ese cambio no se ve en ningún programa: no hay una línea que revisar. Por eso un cambio al conjunto (una fuente nueva, un filtro, un reetiquetado) se trata como un cambio al código: se pide por escrito, lo revisan otras personas, pasa verificaciones automáticas y queda en un registro con versión.

La versión del conjunto es lo que permite, el día que algo falle, saber con qué datos se entrenó cada modelo y volver a la anterior.

La política de Mistol Crédito pide que todo cambio lo aprueben dos personas distintas de su autor. La razón es la separación de funciones: quien escribe un cambio tiende a ver lo que quiso hacer, no lo que hizo, y si puede aprobarse a sí mismo el control deja de existir.

El registro de cambios anota autor y aprobadores de cada versión. Se lee de un vistazo, comparando las dos columnas.

Las verificaciones automáticas existen para que no dependa de la buena voluntad de nadie. Cada una tiene un umbral escrito en la política. Una versión que falla una verificación no pasa al entrenamiento; esa regla solo vale si el sistema la hace cumplir, no si la deja a criterio de quien fusiona.

En el registro, la última columna cuenta cómo se fusionó cada cambio. Una fusión que no es «normal» merece una segunda mirada.

Un informe de validación compara lo medido con el umbral y marca PASA o FALLA. El número de fallos importa, pero importa más qué mide cada uno: aquí no falla una verificación de formato, fallan las que describen justo lo que se vio en las señales de la sala anterior.

Lee el informe de la versión que acabas de encontrar y cuenta las que fallan.

Un control preventivo impide; uno detectivo avisa. En el registro hay una marca que permitió omitir la verificación, así que el control era una recomendación. Un control que quien lo estorba puede apagar solo lo detiene a quien no lo quiere apagar.

La mejora es mover la decisión fuera del autor: la fusión se bloquea sola si una verificación falla, y una excepción exige a otra persona con autoridad y deja rastro.