Parte IV · Las preguntas de negocio

14 · La lección: señal frente a ruido

Las tres preguntas tenían una respuesta aparente (un mes, una región, quizá una relación) y las tres se deshicieron al ponerlas a prueba. Esta parte explica por qué ocurrió y cómo se comprueba.

Mes del año estrella
Ruido
agosto: permutación p = 0,87
Región estrella
Ruido
Navarra: permutación p = 0,60
Ventas ~ satisfacción
Sin relación
Pearson r = 0,0034
Por qué un cuadro de mando sin contrastes lleva a conclusiones falsas
Cualquier gráfico ordena de mayor a menor y siempre hay un primero. Quien se queda ahí «descubre» ganadores en datos puramente aleatorios. La comprobación es barata: antes de dar por bueno un hallazgo, preguntar «¿esto lo haría también el azar?». El test de permutación lo responde sin fórmulas: se barajan los datos miles de veces y se comprueba si el efecto real supera a los que produce el azar.
Ver el test de permutación (idea del código) 
# Test de permutación: ¿el efecto observado supera al azar?
# El estadístico es EXACTAMENTE el que se afirma (aquí, la media más alta de un mes del año)
obs = mayor_media_por_mes(meses, facturacion)
rng = np.random.default_rng(42)          # un generador propio para cada test
nulos = [mayor_media_por_mes(rng.permutation(meses), facturacion) for _ in range(2000)]
p = mean(nulos >= obs)                   # ¿con qué frecuencia el azar iguala lo observado?
Dos condiciones para que el test valga

Medir en el test lo mismo que se afirma. Si la página habla de facturación por mes, el test no puede medir el ticket medio.

Comparar sobre la misma base: meses completos y ventas válidas. Un ganador fabricado por sumar años desiguales o por 16 ventas fuera de rango no lo corrige ningún test.

El hallazgo que sí se sostiene
Mientras se buscaban patrones, lo que destacaba en los datos eran 16 ventas fuera de las reglas del catálogo por 798.360 €. Encontrarlas exige mirar el rango de cada variable antes de agregar nada.

Casos en los que el ruido parece un hallazgo

Esta página responde a las tres preguntas de negocio con una regla general. Las páginas siguientes aplican esa regla a casos concretos, cada uno con su cálculo sobre estas mismas ventas, y se pueden leer en cualquier orden.

Siguiente: ¿se pueden segmentar los clientes? →