Registro y evaluación de salidas

5 tareas · 38 min · Principiante

Una aplicación con un modelo no se comporta igual de un mes a otro: cambian el modelo, el texto de instrucciones y los datos. Sin registro no sabes qué versión produjo qué respuesta; sin evaluación no sabes si una versión nueva es peor. Pero el registro mismo puede convertirse en una fuga si guarda lo que los usuarios escriben. En esta sala lees el registro y las evaluaciones del asistente de soporte de Pacay Software y decides qué se guarda, qué se mide y qué hacer cuando un umbral se rompe. Es lectura de tablas ficticias.

0 de 5 · 0%

Objetivo de la sala

Un registro útil de una aplicación con modelo guarda con cada respuesta la versión del modelo, la versión de las instrucciones, el identificador de la solicitud, el consumo y las marcas de los filtros. Con eso se reconstruye qué ocurrió. Lo que no se guarda en claro es lo que el usuario escribió cuando contiene datos personales: se enmascara o se omite.

Registrar más no es registrar mejor: cada campo que guarda datos de terceros es una obligación de protegerlos.

Responde para continuar

¿Qué debe contener el registro de salidas de una aplicación con modelo?

Versiones, identificador, consumo y marcas de filtro, con los datos personales enmascarados o no guardados Solo la hora y el estado de la respuesta, porque cualquier otro campo se considera un riesgo para la privacidad Todo el texto de cada conversación, tal como lo escribió la persona, para poder reproducir cualquier caso

Un conjunto de evaluación fijo se ejecuta contra cada versión del modelo. La tasa de acierto es los casos acertados entre los casos totales, por cien. Compara la versión nueva con las anteriores y con el umbral acordado antes de publicarla. Calcula la de la versión más reciente.

Responde para continuar

¿Cuál es la tasa de acierto, en porcentaje, de la versión más reciente del modelo? Escribe solo el número.

Los filtros dejan una marca en cada salida: sin fuente, dato personal, formato inválido. Contar las marcas dice dónde duele más. El umbral acordado acepta pocas salidas sin fuente por cada cien. Mira el registro y localiza la marca más repetida.

Responde para continuar

Escribe la marca de filtro que más se repite en el registro de salidas.

El propio registro es un lugar donde los datos personales terminan acumulados. Lee con cuidado las columnas de la tabla: una de ellas conserva el texto que escribieron los usuarios y contiene nombres, correos y teléfonos ficticios sin enmascarar.

Responde para continuar

Escribe el nombre de la columna del registro que guarda datos personales sin enmascarar.

La versión más reciente quedó por debajo del acierto mínimo acordado y ya está en uso. No se trata de culpar a nadie ni de apagar el servicio por reflejo: se trata de contener el daño con lo que ya existe y entender por qué cayó.

Responde para continuar

¿Cuál es la respuesta más prudente?

Dejar la versión nueva en uso y bajar el umbral hasta que la evaluación salga en verde Apagar por completo el asistente de soporte hasta que se pueda sustituir el modelo por otro proveedor Volver a la versión anterior que cumplía el umbral y analizar la caída antes de publicar otra

Inicia sesión para registrar tus puntos y progreso en el ranking.

Entrar · Registrarse

1 Qué se registra y qué no Lab

2 La tasa de acierto Lab

3 Qué falla con más frecuencia Lab

4 El registro que filtra datos Lab

5 Cuando se rompe el umbral Lab

Whoami-Labs Pro utiliza cookies