Análisis del experimento
¿El coach ayuda a manejar mejor? Cada conductor cae al azar en un grupo, los dos ven el mismo juego y la única diferencia es el coach. Ruta de entrega, sin contar a los jugadores de la demo.
Avance de la ruta por intento
Qué parte de la ruta recorrió cada conductor en su intento 1, 2, 3... Una entrega vale 100% y un choque o una salida de vía, lo que alcanzó a avanzar. Los intentos abandonados no cuentan.
En el primer intento, el grupo con coach promedió 75% (6 jugadores) y el grupo sin coach 52% (6 jugadores).
Diferencia coach − control: +22 puntos porcentuales (IC 95%: -17 a +58).
Mann-Whitney p = 0,192 · delta de Cliff +0,47 (mediano).
Con estos jugadores todavía no hay evidencia de que el coach cambie el resultado.
Ver los datos en tabla
Promedio de cada grupo con su intervalo de confianza del 95% entre paréntesis. n: jugadores con datos. Diferencia: coach − control.
| Intento | Con coach | n | Sin coach | n | Diferencia | Mann-Whitney | Delta de Cliff |
|---|---|---|---|---|---|---|---|
| 1 | 75% (48% a 98%) | 6 | 52% (29% a 79%) | 6 | -17 a +58 | p = 0,192 | +0,47 |
| 2 | 39% (20% a 77%) | 3 | 38% (19% a 77%) | 3 | -38 a +40 | p = 0,700 | +0,33 |
| 3 | 100% | 2 | 92% (76% a 100%) | 3 | 0 a +24 | p = 0,683 | +0,33 |
| 4 | 34% | 1 | Sin datos | 0 | Sin datos | Sin datos | Sin datos |
| 5 | 19% | 1 | 19% | 1 | 0 a 0 | p = 1,000 | +1,00 |
| 6 | 100% | 1 | 20% | 1 | +80 a +80 | p = 1,000 | +1,00 |
| 7 | Sin datos | 0 | 100% | 1 | Sin datos | Sin datos | Sin datos |
| 8 | Sin datos | 0 | 100% | 1 | Sin datos | Sin datos | Sin datos |
| 9 | Sin datos | 0 | 100% | 1 | Sin datos | Sin datos | Sin datos |
Puntos por entrega completada
Puntos de la 1.ª, 2.ª, 3.ª... entrega que completó cada conductor.
En la primera entrega, el grupo con coach promedió 0 puntos (4 jugadores) y el grupo sin coach 506 puntos (3 jugadores).
Diferencia coach − control: -506 puntos (IC 95%: -1.434 a 0).
Mann-Whitney p = 0,123 · delta de Cliff -0,67 (grande).
Con estos jugadores todavía no hay evidencia de que el coach cambie el resultado.
Ver los datos en tabla
Promedio de cada grupo con su intervalo de confianza del 95% entre paréntesis. n: jugadores con datos. Diferencia: coach − control.
| Entrega | Con coach | n | Sin coach | n | Diferencia | Mann-Whitney | Delta de Cliff |
|---|---|---|---|---|---|---|---|
| 1 | 0 | 4 | 506 (0 a 1.434) | 3 | -1.434 a 0 | p = 0,123 | -0,67 |
| 2 | 1.285 (1.240 a 1.330) | 2 | 2.031 | 1 | -791 a -701 | p = 0,667 | -1,00 |
| 3 | Sin datos | 0 | 1.808 | 1 | Sin datos | Sin datos | Sin datos |
| 4 | Sin datos | 0 | 2.117 | 1 | Sin datos | Sin datos | Sin datos |
Combustible por entrega completada
Mililitros de diésel de la 1.ª, 2.ª, 3.ª... entrega que completó cada conductor. Menos es mejor.
En la primera entrega, el grupo con coach promedió 170,2 mL (4 jugadores) y el grupo sin coach 182,0 mL (3 jugadores).
Diferencia coach − control: -11,8 mL (IC 95%: -64,5 a +63,5).
Mann-Whitney p = 0,629 · delta de Cliff -0,33 (mediano).
Con estos jugadores todavía no hay evidencia de que el coach cambie el resultado.
Ver los datos en tabla
Promedio de cada grupo con su intervalo de confianza del 95% entre paréntesis. n: jugadores con datos. Diferencia: coach − control.
| Entrega | Con coach | n | Sin coach | n | Diferencia | Mann-Whitney | Delta de Cliff |
|---|---|---|---|---|---|---|---|
| 1 | 170,2 (157,1 a 187,3) | 4 | 182,0 (103,0 a 230,6) | 3 | -64,5 a +63,5 | p = 0,629 | -0,33 |
| 2 | 115,7 (85,7 a 145,8) | 2 | 88,1 | 1 | -2,4 a +57,7 | p = 1,000 | 0,00 |
| 3 | Sin datos | 0 | 74,6 | 1 | Sin datos | Sin datos | Sin datos |
| 4 | Sin datos | 0 | 70,3 | 1 | Sin datos | Sin datos | Sin datos |
Intentos hasta la primera entrega
Porcentaje estimado de conductores que completa la ruta a más tardar en cada intento (Kaplan-Meier). Quien dejó de jugar sin completarla cuenta hasta su último intento, así que la curva puede llegar a 100% aunque no todos la hayan completado.
La mitad del grupo con coach completó la ruta a más tardar en el intento 1 (4 de 6 jugadores ya la completaron).
La mitad del grupo sin coach completó la ruta a más tardar en el intento 3 (3 de 6 jugadores ya la completaron).
Log-rank p = 0,191: el grupo con coach completó 4 veces frente a 2,8 esperadas si el coach no influyera.
Con estos jugadores todavía no hay evidencia de que el coach cambie el resultado.
Ver los datos en tabla
| Intento | Con coach: ya completaron | Jugaron | Completaron por primera vez | Sin coach: ya completaron | Jugaron | Completaron por primera vez |
|---|---|---|---|---|---|---|
| 1 | 50% | 6 | 3 | 17% | 6 | 1 |
| 2 | 50% | 2 | 0 | 17% | 5 | 0 |
| 3 | 100% | 1 | 1 | 72% | 3 | 2 |
¿Cuántos jugadores harían falta?
La potencia es la probabilidad de que el experimento detecte una diferencia que sí existe (Mann-Whitney con p < 0,05). Se busca 80%. Sale de simular 2.000 experimentos por cada tamaño de efecto.
Hoy hay 6 jugadores con coach y 6 jugadores sin coach.
En el primer intento el avance de los dos grupos difiere con un delta de Cliff de +0,47 (mediano): si esa fuera la diferencia real, hoy se detectaría 22% de las veces y para llegar a 80% harían falta 22 jugadores por grupo.
Con estos jugadores ningún efecto de referencia llega a 80% de potencia: un resultado no significativo todavía no dice que el coach no sirva.
¿Con qué control jugaron?
Intentos de cada grupo con el teclado y con los controles táctiles del teléfono. Los dos controles no se manejan igual: si un grupo jugó mucho más en el teléfono, una diferencia entre los grupos podría venir del control y no del coach.
| Intentos | Con coach | Sin coach |
|---|---|---|
| Con teclado | 2 | 2 |
| Táctiles | 10 | 15 |
| % táctiles | 83% | 88% |
| Sin registro | 3 | 3 |
Sin registro: intentos jugados antes de que el juego guardara el control. El porcentaje cuenta solo los intentos con registro.