Los usuarios activos diarios cayeron un 20% de la noche a la mañana. ¿Cómo lo investigas?

Descarta la instrumentación antes de buscar una causa de negocio, porque un fallo de tracking o de la tubería de datos es la explicación más común de un cambio brusco de un día para otro. Luego segmenta a fondo: plataforma, versión de la app, geografía, navegador, nuevos frente a recurrentes y canal de adquisición. Una caída concentrada en un segmento apunta a una causa técnica; una caída repartida por igual en todos los segmentos apunta a algo externo o a tu medición.

Mi primera pregunta siempre es si la caída es real, porque en mi experiencia la mayoría de los desplomes nocturnos son de medición. Así que compruebo si la tubería se ejecutó completa, si alguien cambió la definición de la métrica o el filtro del panel, y si una release de la app cambió los eventos de tracking. Una caída del 20% que es exactamente del 20% cada hora huele a problema de datos, no a problema humano. Luego miro cuándo empezó con precisión de hora, lo que reduce la lista de sospechosos de inmediato, y segmento. Plataforma, versión de la app, país, navegador, nuevos frente a recurrentes. Si está todo en Android 8.4.0, es un bug de release y voy directo al equipo de móvil. Si está repartido por igual en todo, miro hacia fuera: festivos, una caída en un proveedor de inicio de sesión o una campaña de marketing que terminó. Una vez tuve una caída que era enteramente de un país y resultó ser un problema de DNS a nivel de proveedor de internet. Luego reporto qué sé, qué he descartado y qué comprobaría a continuación.