Visión artificial y fallos de robustez

Un informe de validación dice cómo se comportó el modelo con las imágenes con que se validó: esas cámaras, esa luz, esos colores, esas piezas. Su cifra solo vale para la línea mientras la línea se parezca a ese conjunto. Cuando entra una referencia nueva, cambia un lente o se ensucia una lámpara, el modelo recibe imágenes que nunca vio, y su desempeño puede caer sin que nada falle de forma visible: sigue respondiendo con la misma seguridad.

A esa capacidad de seguir acertando cuando la entrada cambia se le llama robustez. En la industria, la mayoría de sus fallos son accidentales (variantes de producto, desgaste, cambios de hardware). Los marcos de amenazas como MITRE ATLAS recogen además la evasión deliberada, en la que alguien prepara la entrada para que el modelo se equivoque; para quien revisa, la señal en los registros es parecida: el modelo deja de ver lo que antes veía.

El primer cruce es simple y casi nunca se hace: comparar lo que se produce con lo que se validó. Si en la línea aparece una variante que no estaba en el conjunto de validación, para ella no hay ninguna cifra; el modelo puede ir bien o mal, y nadie lo sabe hasta que llega el muestreo o el reclamo.

Una pista en los datos de producción: una tasa de rechazo muy por debajo de las demás no siempre es buena noticia.

La cámara es parte del modelo aunque no aparezca en su ficha. Un lente de otra distancia focal, otra iluminación o una lente sucia cambian el tamaño, el enfoque y el contraste de lo que el modelo recibe. Un indicador sencillo, como un índice de nitidez medio por cámara, delata esos cambios antes que el muestreo.

Busca qué cámara cambió y cuándo, y compáralo con la tasa de rechazo de su carril.

La tasa de rechazo no dice cuántas piezas malas pasan. Para eso está el muestreo manual: el inspector encuentra tapas defectuosas y comprueba cuántas de ellas había aprobado el modelo. Esa proporción es la que le importa al cliente.

Calcúlala para el carril de la cámara que cambió, sumando todos sus colores.

Los dos problemas de Tamarillo tienen algo en común: el modelo recibió algo distinto de lo validado y nadie lo detuvo. Los controles útiles miran la entrada (qué referencia se produce, qué nitidez tiene cada cámara, si la configuración de la estación cambió) y, cuando sale de lo validado, mandan las piezas a inspección manual o detienen la decisión automática hasta revalidar.