‹ Cultura 3.14 · Qué nos preguntamos
Pregunta · Decisiones
¿Qué datos estaban realmente disponibles cuando se tomó una decisión?
Reconstruir una decisión con la base de datos de hoy produce un juicio injusto y un modelo optimista.
Por qué importa
Las tablas se actualizan en su sitio. Un campo corregido la semana pasada aparece como si hubiera estado correcto siempre, y con él desaparece la razón por la que alguien decidió lo que decidió.
Esto afecta a dos cosas a la vez: la evaluación de las personas y el entrenamiento de los modelos que aprenden de ellas.
Qué sabemos hasta ahora
Registrar el estado de la información en el momento de la decisión, y no solo su valor final, es la única forma que hemos encontrado de responder a esto. En proyectos con almacenamiento por eventos sale casi gratis; en el resto hay que decidirlo antes de construir.
Cuando falta, la validación temporal del modelo se vuelve una estimación optimista y no lo parece.
Qué continúa abierto
No sabemos cuánto de este historial merece la pena conservar, ni durante cuánto tiempo, cuando el volumen crece.
Tampoco hemos resuelto cómo reconstruir la disponibilidad de información en sistemas de terceros que no guardan versiones.