La ilustracion mas clara del sesgo de supervivencia en la publicidad se resolvio en 1943, antes de que tuviera nada que ver con la publicidad. Los militares estadounidenses tenian un problema con los bombarderos. Demasiados no regresaban. Examinaron los que si volvieron, mapearon los agujeros de bala y encontraron que el dano se concentraba en las alas, el fuselaje y la posicion del artillero de cola. La decision obvia era blindar donde estaban los agujeros.
Abraham Wald, un estadistico de Columbia, dijo lo contrario. Blinden donde no hay agujeros.
Los aviones que estaba observando eran los supervivientes. Todos habian sido alcanzados y habian vuelto a casa, lo que significaba que los impactos en esos lugares eran, por definicion, sobrevivibles. Los motores no tenian marcas en su muestra, no porque nunca fueran alcanzados, sino porque un avion alcanzado ahi no volvia para ser medido. El conjunto de datos tenia un hueco con la forma exacta de la respuesta.
Esto se llama sesgo de supervivencia, y una vez que lo ves no puedes dejar de verlo. Tambien es, mas o menos, el modelo de negocio de la publicidad digital.
El caso de exito es el bombardero que regreso
Abre la pagina de clientes de cualquier plataforma publicitaria. Cada logo es un avion que llego a casa.
"Como Acme redujo su CAC en un 60%." "Como un equipo de dos personas alcanzo $40k MRR con anuncios pagados." Todo cierto, presumiblemente. Todo medido sobre los supervivientes.
Las empresas que gastaron el mismo dinero, ejecutaron el mismo plan y no obtuvieron nada no estan en esa pagina. No estan en ninguna pagina. Se fueron en silencio, no le dijeron a nadie, y su ausencia es lo mas informativo de todo el ejercicio, y es invisible.
No puedes calcular una tasa de exito a partir de un muro de exitos. Pero ese muro es contra lo que se toma casi cada decision publicitaria.
Se pone peor, porque la seleccion ocurre dos veces. Primero, solo los ganadores se documentan. Segundo, los ganadores se autoseleccionan para ser documentados: a los que les fue bien estan encantados de ser un caso de exito, los que les fue mal dejan de contestar correos. La muestra se filtra, y luego se filtra otra vez con el mismo criterio.
Tres situaciones donde esto perjudica a la publicidad
Benchmarks. Una tasa de conversion promedio del 8.18% suena como un objetivo a alcanzar. Es un promedio sobre cuentas que seguian activas cuando se recopilaron los datos. Las cuentas que fracasaron y se cerraron en el segundo mes tienen, por construccion, menos probabilidades de estar incluidas. Los benchmarks honestos son transparentes sobre su metodologia: el de WordStream dice claramente que cubre mas de 13,000 campanas activas, pero "campanas activas" es el filtro. Las muertas tambien tenian numeros.
Folklore de canal. "Los anuncios de Reddit funcionan genial para herramientas de desarrolladores." Puede ser. O: las personas para quienes Reddit funciono escribieron hilos sobre ello, y las personas para quienes no funciono no escribieron nada, y tu estas leyendo el resultado de ese filtro y llamandolo evidencia.
Tu propia historia. La campana que recuerdas como un triunfo es la que mantuviste activa. Las tres que mataste en la primera semana no estan en tu promedio mental. Tu intuicion sobre lo que funciona tambien esta entrenada con una muestra de supervivientes.
Como leer un caso de exito de todas formas
Vas a seguir leyendolos, asi que aqui esta el habito que los hace utiles en vez de enganosos.
- Pide el denominador. Cuantos clientes ejecutaron este plan? Si la respuesta es "no publicamos eso", el caso de exito es una anecdota, y debe sopesarse como tal.
- Busca la metrica que no fue elegida. Un caso de exito que reporta retorno sobre gasto publicitario y no el gasto, o clics y no conversiones, eligio el numero que sobrevivio. Metricas de vanidad vs clics reales es la guia de campo para esa eleccion.
- Encuentra la fecha. Un resultado de una plataforma de hace dos anos es un resultado de una subasta diferente con precios diferentes.
- Prefiere vendedores que publican todo. Existe una lista corta de plataformas publicitarias que publican sus numeros, y es corta porque publicar perdidas es malo para el negocio.
Como seria una medicion honesta
La solucion no es mas datos. Son datos que incluyan los fracasos.
Eso significa publicar las perdidas con el mismo volumen y prominencia que las victorias. Significa un denominador: no "mira los resultados de esta marca" sino "esto es lo que obtuvo cada marca, incluyendo las que no obtuvieron nada." Significa que el lector pueda calcular la tasa de fracaso por si mismo en vez de confiar en un resumen filtrado.
Casi ninguna plataforma publicitaria hace esto, y la razon no es conspiracion. Es que el incentivo de una plataforma va en la direccion opuesta. Los fracasos son malos para el negocio, y nadie obliga a nadie a publicarlos.
Lo que hicimos al respecto
Debo ser directo: yo manejo un tablero publicitario, asi que aqui es donde te cuento lo que construimos. Tomalo como un ejemplo practico del principio y no como un pitch: las reglas completas estan en su propia pagina.
BidSurvivor subasta publicidad doce horas a la vez, dos espacios por dia. La oferta mas alta se queda con el espacio y cualquiera puede superarla en cualquier momento. Dos cosas se derivan de esa estructura, y ambas tienen que ver con los bombarderos que no volvieron a casa.
Perder es publico. El ticker en la parte inferior del tablero dice, en pocas palabras, "XYZ no pudo sobrevivir la oferta de ABC." Ser desplazado no se oculta ni se suaviza. Pasa frente a todos. El sitio se llama BidSurvivor porque la mayoria de las ofertas no sobreviven, y esa es la descripcion honesta de una subasta.
Los numeros de cada marca son publicos, no solo los buenos. Cada marca que ha tenido un espacio tiene una pagina que muestra lo que el tablero realmente le envio: aperturas de tarjeta, clics, la tasa entre ellos. No una muestra seleccionada. Todos, incluyendo los que tienen resultados vergonzosos.
Un detalle que debatimos y creo que acertamos: ocultamos la tasa de clics hasta que una marca tiene al menos cinco aperturas de tarjeta. Dos visitas de dos aperturas no es "100%". No es suficiente para dividir, y un numero titular que no significa nada es peor que ningun numero. Las muestras pequenas son como el sesgo de supervivencia se cuela de nuevo por la puerta principal.
Eso significa que puedes mirar el tablero y concluir que un espacio no vale tu dinero. Preferimos que hagas eso a que compres uno basandote en una promesa y te vayas. Tambien significa que el tablero solo es util como prueba rapida si la lectura es honesta, que es el argumento de las pruebas de marketing rapidas necesitan numeros honestos.
La parte incomoda
La intuicion de Wald solo funciona si estas dispuesto a razonar sobre datos que no puedes ver. Eso es mas dificil de lo que suena, porque los datos faltantes estan ausentes: no se anuncian, no aparecen como un error, simplemente no estan ahi.
El habito que vale la pena construir es pequeno. Cada vez que veas un resultado publicitario, haz una pregunta: como se habrian visto los que fracasaron, y me habria enterado?
Si la respuesta es "nunca me habria enterado", estas mirando las alas de un bombardero y a punto de blindar la parte equivocada del avion.
La historia de Wald esta bien documentada; sus memorandos originales de guerra fueron publicados por el Statistical Research Group de Columbia y estan ampliamente reproducidos. Las cifras de benchmarks citadas provienen de los benchmarks de Google Ads 2026 de WordStream.