Reducir ruido y afinar

Hay tres maneras rápidas de callar una regla ruidosa y las tres son malas: subir el umbral hasta que deje de sonar, apagarla «temporalmente» y excluir una fuente entera. Todas quitan el ruido y la señal a la vez. La manera buena empieza por clasificar los disparos (verdaderos, falsos y benignos esperados), encontrar el origen concreto del ruido y excluir solo eso, con una condición estrecha, una razón escrita, un dueño y una fecha en la que la excepción se revisa o caduca.

La medida más útil para decidir qué regla afinar primero es su precisión: de todos los disparos, qué parte fue algo que había que investigar. Se calcula dividiendo los verdaderos positivos entre el total de disparos. Una regla con pocos disparos y precisión alta es valiosa aunque suene poco; una con muchos disparos y precisión baja es la que quema a la guardia.

Poner la cifra en el informe ayuda a que la discusión no sea de impresiones. Calcula la precisión de esa regla en porcentaje, sin decimales.

Los disparos de una regla rara vez se reparten por igual. Casi siempre un origen concentra la mayoría, y muchas veces es actividad autorizada que la regla no tenía forma de reconocer: pruebas automáticas, un proceso interno, un equipo que trabaja con textos técnicos. Ese origen es el candidato a una excepción estrecha.

Una excepción se revisa con tres preguntas: si es estrecha (excluye un origen concreto y no un canal o una fuente enteros), si tiene fecha de vencimiento y si quien la pide es el dueño de lo que se excluye. La peor es la que excluye justo el lugar donde ocurren los casos reales, porque la regla seguirá «en producción» y no verá nada.