Las métricas del programa

Hay dos familias de medidas. La primera cuenta actividad: consultas ejecutadas, horas de caza, número de cazas abiertas. Es fácil de obtener y sube siempre que el equipo trabaja, pero no dice si el trabajo sirvió. La segunda cuenta lo conseguido: hipótesis que se probaron de verdad, detecciones que llegaron a producción, hallazgos confirmados, huecos de telemetría descubiertos.

Un programa serio informa de las dos, pero solo la segunda justifica su existencia. Presentar únicamente horas y consultas es la forma más segura de que alguien pregunte «¿y qué se consiguió?» sin que haya respuesta a mano.

Al cerrar una caza hay cuatro resultados posibles. Con hallazgo: se halló la conducta. Vacía: se miró donde la huella habría estado, con la telemetría activa, y no estaba. Ciega: no se pudo mirar porque faltaba una fuente o la retención no cubría la ventana. Abandonada: se canceló antes de terminar. Solo las dos primeras cuentan como hipótesis probadas, porque solo en ellas hubo una respuesta.

La ciega no es un fracaso borrable: es el hallazgo de que falta una fuente. Se cuenta aparte y se anota qué fuente faltó y cuántas horas costó, porque es la prueba más concreta que tiene el programa para pedir telemetría.

Abre la consola. La tabla cazas trae las doce cazas del trimestre, y definiciones dice cómo las cuenta el programa. Una consulta agrupa las cazas por resultado. Las hipótesis probadas son las que terminaron con hallazgo o vacía, sin contar las ciegas ni las abandonadas.

La tasa de conversión responde a una pregunta que le importa a ingeniería y a la dirección: de lo que se probó, ¿cuánto quedó vigilado? Se calcula dividiendo las cazas probadas que dejaron al menos una detección en producción entre las cazas probadas, y se expresa en porcentaje. Una caza cuenta una sola vez aunque haya dejado varias detecciones.

Una tasa baja no es necesariamente mala: una caza vacía puede no justificar ninguna detección. Pero una tasa que baja ciclo tras ciclo avisa de que los traspasos no están llegando a producción.

Las cazas ciegas se pueden convertir en una petición concreta. La tabla huecos_de_telemetria anota, por cada una, la fuente que faltó y las horas que se gastaron antes de descubrirlo. La que más horas costó es la que mejor argumenta pedir esa fuente: el equipo ya pagó el precio de no tenerla.