What is *A/B Testing* by Dan Siroker about?

*A/B Testing* provides a step-by-step guide to implementing data-driven decisions through controlled experiments. Dan Siroker and Pete Koomen explain how businesses can optimize websites, emails, and campaigns by testing variables like headlines, layouts, and CTAs. The book includes real-world examples, including Siroker’s work on Obama’s 2008 campaign, which increased donations by $50 million through strategic testing.

Who should read *A/B Testing*?

Marketers, product managers, and business leaders seeking to improve conversion rates or make data-backed decisions will benefit most. It’s particularly valuable for startups aiming to scale efficiently and enterprises looking to replace guesswork with empirical evidence. The book’s actionable frameworks suit both A/B testing beginners and practitioners needing advanced strategies.

Is *A/B Testing* worth reading?

Yes – the book combines tactical advice with high-impact case studies, including how Obama’s campaign achieved a 40.6% sign-up increase through rigorous testing. It offers timeless principles for building a culture of experimentation, making it essential for organizations prioritizing continuous improvement.

How did Dan Siroker use A/B testing in Obama’s campaign?

Siroker’s team tested website elements like donation button colors, headline phrasing, and media formats. One test comparing a “Learn More” vs. “Sign Up Now” CTA boosted email conversions by 40.6%, generating $50M+ in extra donations. This case study demonstrates how incremental changes create compound growth.

What are the key A/B testing frameworks in the book?

- **The 5-step testing process**: Goal-setting, hypothesis formation, variable selection, experiment execution, and result analysis - **Multivariate testing**: Simultaneously evaluating multiple element combinations - **Statistical significance thresholds**: Avoiding false positives through proper sample sizing.

What quote summarizes *A/B Testing*’s philosophy?

“It’s about being humble… maybe we don’t actually know what’s best, let’s look at data and use that to guide us.” This embodies the book’s core message: replacing HiPPO (Highest Paid Person’s Opinion) with empirical validation.

How does *A/B Testing* compare to *Trustworthy Online Controlled Experiments*?

While Kohavi’s academic text focuses on statistical rigor for tech giants, Siroker/Koomen emphasize practical implementation for businesses of all sizes. Both advocate rigorous methodology, but *A/B Testing* prioritizes actionable steps over theoretical depth.

Can A/B testing strategies apply to email campaigns?

Absolutely. The authors detail how testing subject lines (“Free Trial” vs. “30-Day Access”), send times, and personalization tokens can boost open rates by 18-34%. They emphasize tracking secondary metrics like reply rates to avoid skewed data.

Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

The Most Powerful Way to Turn Clicks into Customers

Dan Siroker and Pete Koomen

3.72(363 Reviews)

Descripción general: Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Descubre cómo las pruebas A/B revolucionaron la toma de decisiones digitales, basándose en más de 300,000 experimentos. La misma metodología que ayudó a Obama a ganar en 2012 está desafiando la "HiPPO" (Opinión de la Persona Mejor Pagada) en todas las industrias. ¿Qué pasaría si una simple prueba pudiera duplicar tus tasas de conversión de la noche a la mañana?

Elige cómo se cuenta

Explora el Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios con distintos estilos de aprendizaje

Las mismas ideas de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios. Elige la voz, profundidad y ritmo que más te convengan. Cambia cuando quieras.

Capítulo 1

El botón de los 57 millones de dólares

En 2007, Dan Siroker dejó su trabajo en Google para sumarse a una campaña presidencial. No era un operador político. Tampoco tenía un instinto especial sobre lo que querían escuchar los votantes. Lo que sí tenía era una pregunta fija en la cabeza: ¿de verdad este botón rojo es lo mejor que podemos hacer? El botón decía "Registrarse". Estaba en la página web de la campaña de Barack Obama. Era la puerta de entrada para cada suscriptor de correo, cada voluntario y cada dólar recaudado en línea. Cuando Siroker lo miró, no vio un simple elemento político. Vio un problema de optimización. Así que hizo un experimento. Cuatro textos diferentes para el botón. Seis imágenes y videos distintos sobre el formulario. En total, 24 combinaciones que se mostraban al azar a los visitantes. Todo medido con una sola métrica: los registros por correo electrónico. El equipo de campaña apostaba por el video. La voz de Obama, su presencia, sus discursos más potentes... estaban convencidos de que eso movería más a la gente que una foto fija. Se equivocaron. Todos los videos rindieron peor que cualquiera de las imágenes. Y una combinación en particular —una foto familiar con las palabras "Más información"— superó a la versión original en un 40,6 por ciento. A lo largo de la campaña, ese aumento se tradujo en 2,8 millones de suscriptores adicionales, 288.000 voluntarios más y 57 millones de dólares en donaciones que, de otro modo, nunca habrían existido. Cincuenta y siete millones de dólares gracias a una prueba en un botón. Vale la pena detenerse un segundo en esa cifra. Ahí está metido todo el argumento de lo que Dan Siroker y Pete Koomen construirían después. Las herramientas para hacer ese experimento solo existían dentro de las grandes empresas tecnológicas. Pero Siroker y Koomen querían ponerlas al alcance de cualquiera. En 2010 fundaron Optimizely. Y con eso ayudaron a cambiar la forma en que las organizaciones toman decisiones: alejándose del famoso HiPPO, es decir, la opinión de la persona mejor pagada, y acercándose a algo mucho más honesto: los datos. A continuación, vamos a ver el marco de trabajo que desarrollaron tras analizar cientos de miles de experimentos. Es una guía para transformar corazonadas en conocimiento real. Y todo empieza con una pregunta que la mayoría de las organizaciones pasa totalmente por alto.

Capítulo 2

Paso uno: definir qué significa ganar

El proceso de pruebas en cinco pasos que proponen Siroker y Koomen no empieza probando cosas, sino definiendo. Antes de saber qué variante gana, tienes que decidir cómo vas a medir el marcador. Ellos proponen un experimento mental muy útil. Imagina que alguien te pregunta para qué existe tu sitio web y respondes que no estás seguro. Esa persona te dice: "¿Y por qué no lo quitas?". De repente, sabes exactamente para qué sirve: porque hace algo concreto que le importa a tu negocio. Ese objetivo específico es tu métrica de éxito. En una tienda en línea, puede ser el ingreso por visitante. En una página de recaudación de fondos, la donación promedio por visita. En un servicio de suscripción, la tasa de retención. La métrica tiene que ser cuantificable y, sobre todo, tiene que ser la correcta. Aquí es importante la diferencia que plantea Avinash Kaushik entre macroconversiones y microconversiones. Una macroconversión es la acción más ligada a la razón de ser de tu negocio. Las microconversiones son los pasos intermedios. Vale la pena medir ambas, pero optimizar una microconversión sacrificando la macro es la receta perfecta para perseguir métricas vanidosas: números que se ven muy bonitos pero no significan nada. La métrica de la campaña de Obama eran los registros por correo. Sus propios datos demostraban que, una vez que conseguían un correo, eran excelentes convirtiéndolo en donaciones. El cuello de botella no era la recaudación; era el registro. Ese es el segundo paso del proceso: cuando ya tienes tu métrica, miras tus analíticas y descubres en qué punto se caen los usuarios. El embudo de Obama tenía un tráfico fuerte de entrada y una gran conversión de correo a donación. El hueco estaba en el medio. Y ese hueco les dijo exactamente dónde tenían que enfocar sus esfuerzos. El tercer paso es la hipótesis. No es una adivinanza. Es una afirmación concreta y comprobable sobre por qué un cambio va a mejorar tu métrica. El caso del Fondo Clinton-Bush para Haití lo deja muy claro. Cuando el equipo añadió la imagen de las víctimas del terremoto a un formulario de donación, las donaciones cayeron. Pero no descartaron la idea de inmediato. Tenían una hipótesis: tal vez el problema no era la imagen, sino que estaba empujando el formulario hacia abajo y obligaba a los usuarios a desplazarse. Así que probaron un diseño en dos columnas, con la imagen al lado del formulario. Esa versión superó a la original. Sin una hipótesis clara, habrían concluido que las imágenes perjudican las donaciones. Con la hipótesis, descubrieron una verdad. Los pasos cuatro y cinco son la priorización y la ejecución. El tiempo de tu equipo y el tráfico de tu web son finitos. Usa el retorno de inversión proyectado para clasificar tus experimentos. Luego ejecútalos, mídelos con tu métrica de éxito y espera a alcanzar significación estadística antes de cantar victoria. Y el ciclo no termina ahí. Se retroalimenta. Cada prueba completada genera nuevas preguntas, y esas preguntas se convierten en la siguiente ronda de hipótesis.

Ve cada palabra mientras la escuchas

Sigue la lectura sin esfuerzo mientras cada palabra del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios se ilumina en tiempo real.

Capítulo 3

Buscar el máximo global

Hay una trampa en la que caen casi todos los equipos cuando empiezan a hacer pruebas: encuentran un titular mejor, un color de botón más atractivo o una imagen más bonita, y se quedan puliendo eso. Están escalando la colina en la que están parados. Nunca se preguntan si hay una montaña más alta en otra parte. En optimización, esa cumbre cercana se llama el máximo local. La cima más alta de toda la cordillera es el máximo global. Siroker y Koomen afirman que la mayoría de los equipos pierden el tiempo en el máximo local y nunca llegan a encontrar el global. El equipo digital de Disney hizo un experimento en la página principal de ABC Family que ilustra esto a la perfección. La página original tenía una imagen promocional enorme de un programa destacado: era vistosa y pensada para llamar la atención. Podrían haber probado otras imágenes, otros programas u otros colores. Pero prefirieron mirar las búsquedas de los usuarios y notaron algo: muchísima gente buscaba títulos de programas específicos o nombres de episodios. No estaban navegando al azar; buscaban algo concreto. Así que el equipo diseñó una página totalmente distinta. Menos visual, más jerárquica y organizada para que los usuarios pudieran navegar por menús y encontrar exactamente lo que querían. Su meta era aumentar la interacción entre un 10 y un 20 por ciento. El resultado real fue un incremento de más del 600 por ciento. Esa es la diferencia entre pulir y explorar. Pulir mejora lo que ya tienes. Explorar te hace preguntar si lo que tienes es lo correcto. Chrome Industries, la marca de mochilas y ropa para ciclistas, descubrió una variante de esto en una prueba más pequeña. Estaban probando el orden de tres bloques promocionales en su página de inicio, asumiendo que los usuarios leían de izquierda a derecha. Lo que descubrieron fue que el bloque central siempre funcionaba mejor que el de la izquierda, sin importar el contenido que tuviera. Los usuarios no leían de izquierda a derecha: iban directo al centro. Ese solo hallazgo cambió todo el rediseño de su sitio web. Y no porque fuera una prueba gigantesca, sino porque reveló un comportamiento real de sus usuarios. Lumosity, la plataforma de entrenamiento cerebral, encontró su máximo global cuestionando su propio modelo de negocio. Sus científicos recomendaban entrenar entre 15 y 20 minutos al día, cuatro o cinco veces por semana. Sin embargo, los usuarios se quedaban conectados durante horas y, con el tiempo, entraban cada vez menos. El equipo planteó la hipótesis de que el acceso ilimitado estaba causando agotamiento. Probaron una versión que limitaba a los usuarios a una sola sesión diaria y les avisaba cuando habían terminado. El gerente de producto, Eric Dorf, estaba nervioso. Si pagas una suscripción y no puedes usarla todo lo que quieres, ¿por qué ibas a seguir pagando? Los resultados lo dejaron helado. Con el modelo limitado, la gente entrenó más a largo plazo. El gráfico era clarísimo. Restringir el acceso aumentó la fidelización. El mensaje del entrenamiento diario se convirtió en la base de toda la comunicación de Lumosity a partir de ese momento. La lección no es que siempre debas explorar antes de pulir. Es que ambas acciones se complementan. A veces, una pequeña prueba de ajuste te da la clave para un gran rediseño. A veces necesitas salir de la arboleda para ver dónde está la cumbre más alta.

Capítulo 4

Menos es más: el principio de sustracción

Uno de los descubrimientos más contraintuitivos tras analizar cientos de experimentos es que, muy a menudo, la opción ganadora es la que quita elementos en lugar de añadirlos. La página de donaciones del Fondo Clinton-Bush para Haití tenía un formulario con campos para el número de teléfono y el trato personal. La organización no estaba llamando a nadie por teléfono porque no daba abasto, así que recopilaban datos que nadie usaba. El equipo pensó que si quitaban esos campos reducirían la fricción y subirían las donaciones. Eliminar solo dos campos opcionales produjo una mejora del 11 por ciento en los ingresos por visita. Dos campos. Un 11 por ciento. SeeClickFix, una plataforma de participación ciudadana, tenía lista una nueva página de inicio. Incluía un mapa interactivo muy avanzado técnicamente y muy vistoso. Hicieron una prueba A/B contra su versión original: un recuadro gris muy simple con una llamada a la acción y una descripción. La versión sencilla generó un 8 por ciento más de interacción. La página más espectacular perdió. Cost Plus World Market probó a ocultar los campos del código de promoción y las opciones de envío en el proceso de pago, convirtiéndolos en enlaces desplegables. El ingreso por visitante subió un 15,6 por ciento. Las conversiones aumentaron un 5,2 por ciento. Los campos seguían ahí y el usuario podía usarlos, pero quitarlos de la vista principal redujo el ruido visual lo suficiente como para marcar la diferencia. Avalanche Technology Group, distribuidor australiano del antivirus AVG, eliminó los enlaces del menú superior durante el proceso de pago. Solo los enlaces de navegación. La tasa de conversión mejoró un 10 por ciento y el ingreso por visitante subió un 16 por ciento. Cada elemento con enlace en una página es una puerta de salida. Cada opción es una decisión que el usuario tiene que tomar. A menos decisiones, más conversiones. La campaña de Obama de 2012 llevó este principio al límite. Su formulario de donaciones ya estaba hiperoptimizado: habían quitado todo lo superfluo y solo quedaban los campos exigidos por ley. Pero como la ley federal exige cierta información de los donantes, no podían eliminar nada más. Lo que sí podían hacer era lograr que el formulario pareciera más corto dividiéndolo en pasos. El diseño secuencial dividió el formulario: primero pedía el monto de la donación, luego la información personal, después los datos de pago y, al final, la profesión y el empleador. Pedir el monto primero encajaba con el estado mental del usuario: cuando alguien decide donar, está listo para poner una cifra, no su dirección. El formulario en secuencia logró un aumento del 5 por ciento en la conversión sobre una página que ya parecía optimizada al máximo. Como dijo Kyle Rush, el desarrollador principal de la campaña: logras que más gente llegue a la cima de la montaña si le muestras una pendiente suave en lugar de una pared empinada.

Saca más partido al Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Recibe ideas a diario de más de 100 mil lecciones
Las palabras se iluminan al ritmo del audio
Tu biblioteca guardada en todos tus dispositivos

Capítulo 5

Las palabras importan: el poder de la llamada a la acción

Después de que el equipo del Fondo para Haití eliminó los dos campos opcionales del formulario, se fijaron en el botón. Decía "Enviar". Lo cambiaron por "Apoyar a Haití". El impacto fue de varios dólares extra por visita. Ese cambio, sumado a las optimizaciones de diseño y campos, ayudó a recaudar más de un millón de dólares adicionales en ayuda humanitaria. Una sola palabra. "Enviar" describe lo que el usuario le hace a un formulario. "Apoyar a Haití" describe lo que su acción significa en el mundo real. Es la diferencia entre una transacción mecánica y un acto humano. En Formstack, una herramienta para crear formularios web, el equipo debatía cómo llamar al elemento principal de su menú de navegación. Habían elegido "Por qué usar nuestra herramienta" porque querían convencer a los visitantes de que eran mejores que la competencia. Pero las analíticas mostraron que la gente no hacía clic ahí. Probaron cambiarlo por "Cómo funciona". La nueva etiqueta aumentó el tráfico a esa página en casi un 50 por ciento y subió los registros de prueba gratuita de dos semanas en un 8 por ciento. "Por qué usar nuestra herramienta" invitaba a comparar. "Cómo funciona" invitaba a la curiosidad. Y para un visitante que aún no sabe bien qué hace la plataforma, la curiosidad es una puerta mucho más útil. LiveChat, que vende programas de chat para atención al cliente, cambió el botón de su página de inicio: pasó de "Prueba gratuita" a "Pruébalo gratis". El porcentaje de clics aumentó un 14,6 por ciento. La información es exactamente la misma, pero el enfoque cambia. "Prueba gratuita" es un sustantivo que describe un producto. "Pruébalo gratis" es un verbo que invita a actuar. Si quieres que alguien haga algo, pídeselo directamente. El trabajo de Daniel Kahneman sobre el marco conceptual explica la base teórica detrás de lo que estas pruebas no paran de confirmar. Decir que las probabilidades de sobrevivir a una cirugía son del 90 por ciento transmite mucha más tranquilidad que decir que la mortalidad al mes es del 10 por ciento. Es la misma información, pero la respuesta emocional es completamente distinta. Un embutido que se anuncia como "90 por ciento libre de grasa" resulta mucho más atractivo que si se describe como "10 por ciento de grasa". La forma en que presentas la información moldea lo que la gente siente, y lo que siente determina lo que hace. Un estudio de 1995 de la psicóloga Sara Banks descubrió que las mujeres que vieron un video enfocado en las pérdidas —en los riesgos de no hacerse una mamografía— tenían más probabilidades de hacérsela al año siguiente que las que vieron un video enfocado en las ganancias y los beneficios. Un 61,2 por ciento frente a un 51,5 por ciento. Mismos datos, distinto enfoque, comportamiento totalmente diferente. No hay reglas universales sobre qué enfoque funciona mejor. De eso se trata todo esto: hay que probar.

Capítulo 6

Fracasa rápido y aprende

No todos los experimentos terminan en victoria. IGN, el sitio web de videojuegos, quería llevar más tráfico a sus videos porque generaban muchos ingresos publicitarios. Su hipótesis era que si movían el enlace "Videos" a la extrema izquierda del menú principal, un espacio privilegiado, los clics aumentarían. Lanzaron la prueba. La tasa de clics en los videos cayó un 92,3 por ciento. Al mirar los datos, la razón era evidente. La mayor parte del tráfico de IGN venía de usuarios recurrentes que sabían exactamente dónde estaba el enlace: a la derecha. Cuando lo movieron a la izquierda, no lo encontraban. Y en lugar de buscarlo, simplemente no hacían clic. Si IGN hubiera hecho el cambio sin probarlo antes, el daño habría sido enorme antes de que alguien se diera cuenta. Un gran minorista en línea descubrió que mostrar valoraciones con estrellas en las páginas de producto ayudaba a aumentar las ventas. Así que decidieron ponerlas también en la página de categoría, un nivel más arriba, donde se muestran todos los productos. Parecía de lógica pura: mostrar las valoraciones antes en el embudo debería animar a hacer más clics. Sin embargo, la conversión cayó un 10 por ciento. Lo que funciona en una etapa del embudo no funciona automáticamente en otra. El caso de Etsy es todavía más revelador. Su equipo rediseñó el muro de actividad: quitaron la vista "Tu tienda" y dejaron solo la de "Gente que sigues". Pensaban que estaban simplificando las cosas. La interacción se desplomó. Al analizar los datos, descubrieron que los vendedores usaban ese muro como una herramienta de gestión para controlar sus tiendas, rastreando qué habían publicado y cuándo. El equipo había diseñado la función pensando en los compradores, pero los vendedores la usaban para algo totalmente distinto. Sin ese test fallido, Etsy nunca se habría enterado de ese uso. La siguiente versión incluyó ambas vistas. Al final, Etsy terminó creando funciones específicas a partir de un comportamiento que solo descubrieron porque algo se rompió. Chrome Industries probó si un video de producto vendería más que una foto fija para su zapatilla Truk. Después de casi tres meses, el resultado fue prácticamente un empate: el video superó a la imagen por una fracción de punto porcentual. Pero producir video es muchísimo más caro que tomar fotos. La conclusión fue clarísima: el costo extra no estaba justificado. Chrome pudo archivar el proyecto del video y destinar esos recursos a experimentos con mayor potencial. Una prueba que demuestra que una idea no funciona es un regalo. Te libera de perder tiempo en cosas que no importan para enfocarlo en lo que sí puede funcionar.

Ve cada palabra mientras la escuchas

Sigue la lectura sin esfuerzo mientras cada palabra del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios se ilumina en tiempo real.

Capítulo 7

Crear el equipo ideal

Las pruebas A/B no pertenecen a un solo departamento. Cruzan marketing, gestión de producto, ingeniería y diseño. Para que funcionen a largo plazo, hay que pensar cómo encajan en la organización, no solo en la teoría, sino en la estructura real. Algunas empresas crean un equipo centralizado de pruebas. Scott Zakrajsek, que ha montado programas de experimentación en Staples, Victoria's Secret y Adidas, cuenta cómo empezó siendo un equipo de una sola persona y fue contratando: un desarrollador enfocado en pruebas, un diseñador creativo y analistas adicionales. Su equipo centralizado en Adidas gestiona todas las pruebas de la empresa. Cualquiera que tenga una idea acude a ellos. La estrategia a largo plazo es mantener al equipo centralizado como guardián del conocimiento, mientras se va descentralizando la ejecución hacia los gerentes de producto con el tiempo. Otras organizaciones optan por la descentralización desde el principio. CareerBuilder sacó las pruebas del grupo de desarrollo y las puso en manos de los responsables de producto, que son quienes tienen un interés directo en páginas específicas. Su administrador, David Harris, capacita a cada nuevo desarrollador y resuelve dudas de control de calidad, pero no interviene en las decisiones sobre qué probar. La meta es dar creatividad y libertad a cada persona en su área. La desventaja es la coordinación: si varios equipos prueban en paralelo, tienen que compartir resultados y buenas prácticas. De lo contrario, la empresa pierde ese aprendizaje colectivo que hace que el valor de las pruebas se multiplique. En Netflix, las pruebas se gestionan a nivel de gerente de producto. Cada uno es responsable de una plataforma de reproducción específica. Dos veces por semana, los vicepresidentes y gerentes de producto se reúnen para revisar resultados y evaluar nuevas ideas. Y cada seis u ocho semanas organizan una reunión de ciencia del cliente con el director ejecutivo y todo el equipo directivo para revisar qué se está probando, qué se ha implementado y qué no ha funcionado. Elijas la estructura que elijas, hay cuatro elementos fundamentales. Primero, una persona responsable: alguien que lidere las pruebas, las promueva y evite que queden sepultadas por tareas más urgentes. Segundo, aliados en toda la organización: personas en marketing, ingeniería y producto que integren la experimentación en la planificación diaria. Tercero, profesionales capacitados: gente con la formación, los recursos de diseño y el respaldo institucional necesarios para crear e innovar. Probar sin creatividad es solo hacer pequeños ajustes sin impacto. Y cuarto, un registro histórico: guarda un registro de cada prueba, qué probaste, cómo lo configuraste, cuál fue el resultado y por qué. Cuando alguien se va de la empresa, el conocimiento se queda. Y cuando llega alguien nuevo, no empieza desde cero. Lizzie Allen entró a IGN en 2010 como analista de datos júnior. En la empresa nadie había oído hablar de las pruebas A/B. Empezó a enseñarlas en sesiones de capacitación, pero vio cómo el entusiasmo inicial se apagaba a medida que la gente lo veía como un paso extra e innecesario. Así que lo convirtió en un juego. Creó la "Copa Maestro A/B": cada semana enviaba capturas de pantalla de un test en IGN y pedía a la gente que adivinara cuál variante había ganado. Al final del mes, quien tenía más aciertos se coronaba como el Maestro A/B. Casi todo el mundo fallaba. Hubo meses en que nadie ganó. El juego generó conversaciones, aportó humildad e hizo que la gente tuviera curiosidad. Semana a semana, Allen creó una cultura en la que los empleados caminaban por los pasillos diciendo "deberíamos probar esto, deberíamos probar aquello". Y lo logró siendo una analista júnior en una empresa de 300 personas. Estas herramientas no requieren un gran cargo. Solo necesitan a alguien con ganas de ser, como ella misma dijo, un poco insistente.

Capítulo 8

Más allá de la página web: correo, precios y personalización

La misma lógica que se aplica a un botón o a un titular sirve para el asunto de un correo electrónico, el precio de un producto o la experiencia que le muestras a distintos tipos de visitantes. En 2011, David Malpass, de Prezi, estaba preparando un envío masivo de correo para Halloween. Tenía tres opciones de asunto preparadas. Su jefe le sugirió una cuarta: "¡Bú!". A Malpass le pareció una idea pésima. Aun así la probó y envió las cuatro variantes a un millón de usuarios. "¡Bú!" ganó con un 20 por ciento más de aperturas. La lección no es que los asuntos de una sola palabra ganen siempre. La lección es que la intuición no es de fiar, y el costo de hacer una prueba es tan bajo que deberías probar incluso las ideas que estás seguro de que van a fallar. En Prezi también descubrieron que el momento de envío importa tanto como el contenido. Para los educadores de su base de usuarios, el lunes era el día con mayor tasa de apertura, y luego iba bajando durante la semana. Para los no educadores, el pico era el jueves. El mismo correo, enviado a distintos segmentos en momentos diferentes, da resultados muy distintos. Segmentar no es solo dirigir un mensaje. Es entender que tu audiencia no es un bloque homogéneo. Las pruebas de precios son las más delicadas y exigen máxima precisión metodológica. La técnica del descuento de último minuto permite medir la sensibilidad al precio sin complicar el sistema técnico ni arriesgar la relación con el cliente: se le muestra al usuario un precio más alto y se le revela un descuento justo antes de confirmar la compra. Así obtienes datos de cómo afecta ese precio alto a la conversión sin cobrarle a nadie más de lo esperado. Para probar el efecto psicológico de las terminaciones de precios —si funciona mejor $19,95, $19,99 o $20,00—, esta técnica es limpia y rápida. Judy's Book, un sitio de búsqueda social y opiniones, probó si mostrar una columna con la opción gratuita junto a las opciones de pago aumentaba los registros pagados. La hipótesis era que poner como referencia una opción gratuita con funciones mínimas haría que la opción de pago se viera más valiosa. Los clics en el botón de registro de pago aumentaron un 198,6 por ciento. El efecto ancla funciona. La pregunta siempre es qué ancla usar, y la única forma de saberlo es probar. La personalización es el siguiente paso, y es más sutil de lo que parece. La campaña de Mitt Romney de 2012 probó páginas de destino con geolocalización, mostrando a los visitantes un mensaje que incluía el nombre de su estado en la llamada a la acción. Los usuarios dejaron su correo y código postal un 19 por ciento más a menudo cuando veían el mensaje personalizado para su estado. La campaña terminó creando experiencias personalizadas para los 50 estados, con mensajes específicos para votantes tempranos y voto por correo. Los visitantes de Ohio veían instrucciones para votar por adelantado; los de Colorado, instrucciones para el voto por correo. Sin embargo, Wikipedia probó la personalización y descubrió lo contrario. Su equipo de recaudación vio que los usuarios donaban menos cuando recibían un mensaje personalizado que cuando recibían una petición universal. Parte de la identidad de marca de Wikipedia es su apertura y su carácter universal. Un mensaje personalizado chocaba con esa percepción. Los datos lo demostraron claramente. Mantuvieron el mensaje universal. La personalización no siempre es la mejor opción. A veces la experiencia general promedio es simplemente la mejor. La única forma de saberlo es probándolo.

Saca más partido al Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Recibe ideas a diario de más de 100 mil lecciones
Las palabras se iluminan al ritmo del audio
Tu biblioteca guardada en todos tus dispositivos

Capítulo 9

El juego a largo plazo: cultura, iteración y lo que viene después

Las empresas que más aprovechan las pruebas no son las que hacen más experimentos. Son las que ven la experimentación como un ciclo continuo y no como un proyecto con fecha de caducidad. Dan McKinley, de Etsy, explica el cambio en la forma de construir productos en su equipo entre 2007 y el momento en que se escribió esto. En los primeros tiempos, los ingenieros pasaban meses trabajando en una función, la lanzaban entre aplausos en una reunión de la empresa y pasaban a otra cosa. Dos años después, tenían que eliminar la función porque nadie la usaba. "Me di cuenta de que estábamos fallando en lo que intentábamos hacer; simplemente no éramos muy buenos dándonos cuenta de que estábamos fallando", comentó. La solución fue hacer lanzamientos más pequeños, medir cada uno e iterar. No once cosas a la vez, sino once cosas en secuencia. Las pruebas multivariable, que prueban varios elementos simultáneamente, son muy útiles para detectar efectos de interacción entre componentes. El experimento de Obama en 2008 fue multivariable: probó todas las combinaciones posibles de botones y medios al mismo tiempo. Pero las pruebas multivariable requieren mucho más tráfico para alcanzar significación estadística, porque multiplicas el número de combinaciones que ven los usuarios. En la práctica, las empresas que mejor funcionan con las pruebas eligen un enfoque más ágil: pruebas A/B sencillas, implementar la opción ganadora y pasar a la siguiente variable. Los efectos de interacción existen, pero son poco frecuentes. La prueba de Obama lo confirmó: el botón que mejor funcionó en general también fue el mejor en la prueba multivariable, y ocurrió lo mismo con el contenido multimedia. La prueba grande confirmó lo que las pruebas sencillas habrían descubierto de todos modos. El cambio cultural profundo es lo que realmente importa. Las pruebas A/B eliminan el debate ideológico y lo reemplazan por lo empírico. En lugar de decir "siento que deberíamos hacer X", una cultura de experimentación genera la mentalidad de "tengo la hipótesis de que X es mejor; hagamos una prueba". Y tras el experimento: "sé que debemos hacer X porque la evidencia lo demuestra". Jarred Colli, de Rocket Lawyer, cuenta lo que pasó después de que un año de pruebas lograra una mejora cercana al 50 por ciento en la tasa de conversión. Antes había temas sagrados que no se podían tocar ni cambiar. Cuando llegaron los resultados, esa actitud desapareció por completo. "Ahora", dijo, "lo probamos todo". Ese es el destino final. No se trata de conseguir un botón mejor o una mayor tasa de conversión en una sola página. Se trata de crear una empresa que ha aprendido a hacer preguntas en lugar de imponer respuestas, que ha sustituido la opinión del jefe mejor pagado por la hipótesis, y que trata cada suposición como una invitación para descubrir la verdad. Ya tienes un sitio web. Ya tienes visitantes. La pregunta que se hizo Dan Siroker en 2007 sigue siendo la correcta: ¿de verdad esto es lo mejor que podemos hacer? La única respuesta honesta es: todavía no lo sabemos. Pero podemos averiguarlo.

★★★★★

Has llegado al final del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

“Llevo 23 días y lo he usado todos los días. Ya forma parte de mi rutina diaria.”

jayallen

Temas clave del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

conversion rate optimization
data driven decision-making
website user experience
digital experimentation
evidence based marketing

Mejores citas del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

The beauty of A/B testing lies in its simplicity and objectivity.
Curiosity: the willingness to question assumptions and test hypotheses.
Without knowing how you're keeping score, you can't determine which variation wins.
Analytics data reveals these friction points.
Well-formulated hypotheses make tests more informative.

Personajes del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Dan SirokerAuthor and former Google product manager
Pete KoomenAuthor and co-founder of Optimizely

Sobre el Autor

Dan Siroker y Pete Koomen, coautores de A/B Testing: The Most Powerful Way to Turn Clicks Into Customers, son figuras pioneras en la experimentación basada en datos y la optimización digital.

Siroker, exdirector de analítica para la campaña presidencial de Barack Obama en 2008, cofundó Optimizely, la plataforma de experimentación líder en el mundo utilizada por empresas como Disney, Starbucks y Google.

Koomen, exgerente de producto de Google que ayudó a lanzar Google App Engine, aporta experiencia técnica en sistemas de software escalables, perfeccionada durante sus estudios de matemáticas y ciencias de la computación en la Universidad Case Western Reserve.

Su libro sintetiza décadas de experiencia en estrategias accionables para aprovechar las pruebas A/B con el fin de impulsar el crecimiento empresarial, reflejando la misión de Optimizely de democratizar la toma de decisiones informada por datos. Siroker comparte perspectivas de liderazgo en su blog ampliamente leído, mientras que el trabajo de Koomen ha sido reconocido con premios como el Young Alumni Achievement Award de la Escuela Siebel.

Elogiado por su combinación de casos prácticos y marcos de trabajo accesibles, su libro se ha convertido en una lectura esencial para especialistas en marketing y equipos de producto, respaldado por la adopción de Optimizely en más de 8,000 empresas en todo el mundo.

Descargar resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Obtén el resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios como PDF o EPUB gratis. Imprímelo o léelo sin conexión en cualquier momento.

A los usuarios también les gustó

/ B Testing

Dan Siroker and Pete Koomen

A/B Testing — Statistical Modelling for Data Science

A/B Testing - A complete guide to statistical testing | Towards Data Science

How to choose the right A/B test | ABtesting.tools

A/B Testing Methodology: Statistical | Digital Codex

5 sources

The Science of A/B Testing

Portada del libro A/B testing for marketing: why your gut is wrong

23 sources

A/B testing for marketing: why your gut is wrong

Testing Business Ideas

David J. Bland & Alexander Osterwalder

You Should Test That

Chris Goward

Portada del libro Testing Strategies That Actually Work

21 sources

Testing Strategies That Actually Work

The mom test

Rob Fitzpatrick

Portada del libro Growth hacking for startups: Why ads aren't enough

28 sources

Growth hacking for startups: Why ads aren't enough

Preguntas frecuentes sobre el Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Descubre más

PLAN DE APRENDIZAJE

The Psychology of High-Impact Conversion

This plan is essential for growth marketers and sales professionals looking to merge behavioral science with data-driven optimization. It provides a unique framework for mastering both the digital funnel and the psychological triggers that lead to a final close.

1 h 30 m•3 Secciones

PLAN DE APRENDIZAJE

Digital Growth: From Zero to Profitable Campaign

In an increasingly crowded digital landscape, mastering the transition from visibility to profitability is essential for any modern entrepreneur. This plan is designed for business owners and marketers who need a structured roadmap to master conversion psychology, paid acquisition, and automated community building.

2 h•4 Secciones

PLAN DE APRENDIZAJE

Hidden Psychology of Meta Ads

This plan is essential for digital marketers and entrepreneurs who want to move beyond basic technical settings and master the underlying human science of advertising. It bridges the gap between data-driven targeting and the deep-seated psychological triggers that actually convert viewers into customers.

4 h 49 m•4 Secciones

PLAN DE APRENDIZAJE

Rapid Deployment and Digital Persuasion

This plan is designed for entrepreneurs and developers who need to launch products fast while ensuring they actually convert users. It combines the technical speed of prompt-based engineering with the psychological rigor of influence design to create a competitive edge in the digital economy.

2 h•4 Secciones

PLAN DE APRENDIZAJE

Mastering the Diagnostic Wedge

In an era of high acquisition costs, the diagnostic wedge offers a strategic way to capture users through immediate utility rather than hard selling. This plan is essential for product managers and growth leads looking to build sustainable ecosystems through data-driven conversion strategies.

2 h•3 Secciones

PLAN DE APRENDIZAJE

Psychology-Based FB Ads for High-Ticket Pros

This plan bridges the gap between technical ad management and the deep psychological drivers of premium buyers. It is essential for high-ticket service providers and marketers looking to scale profitably using science-backed persuasion.

5 h 25 m•4 Secciones

PLAN DE APRENDIZAJE

The Grit of Decision Science

This plan bridges the gap between behavioral theory and practical application for professionals facing high-pressure choices. It is ideal for leaders and strategists who want to master the psychological friction between intuition and logic.

2 h 18 m•3 Secciones

PLAN DE APRENDIZAJE

Pilot Partnerships & Product Testing

This learning plan is designed for founders and product leaders looking to eliminate guesswork during early-stage development. It provides a structured roadmap for validating ideas, running effective pilots, and scaling operations through strategic alliances.

4 h 15 m•4 Secciones

Creado por exalumnos de la Universidad de Columbia | en San Francisco

BeFreed Reúne a una Comunidad Global de Mentes Curiosas

4.7

valoración media

Más de 7,84 mil valoraciones de la app

Comunidad BeFreed

En serio, todavía no he explorado la app a fondo, pero después de usarla estos últimos días estoy impresionadísima… BeFreed está en otro nivel comparada con cualquier otra app de aprendizaje que haya usado. Te engancha muchísimo y de verdad mejora la concentración, ¡ideal para los que no paran de hacer scroll!

@ladyInfinity

Compré BeFreed hace exactamente 23 días y lo he usado todos los días desde entonces. Se ha integrado por completo en mi rutina diaria de trabajo y aprendizaje.

@jayallen

La verdad es que la app ha superado todas mis expectativas. Puedo pedirle que genere audio sobre cualquier tema, sea cual sea, y el resultado es impresionante. Mi campo profesional es una especialización en psicoterapia y es multidisciplinario; aun así, las respuestas son muy precisas.

@Raguipa

Lo que más valoro es cuánto ha reducido mi scroll: paso menos tiempo buscando y más tiempo absorbiendo información. La combinación de audiolibros completos, podcasts y los planes de aprendizaje es brillante.

@colonyofcreatorsNGO

Llevo 24 años siendo instructor de aprendizaje acelerado PhotoReading… los libros, la lectura y el aprendizaje son lo mío, y BeFreed ha hecho un gran trabajo ofreciendo un enfoque innovador para transmitir información de una forma fácil de consumir.

@BeFreed user

No es solo una app de resúmenes de libros: he usado la opción de lectura divertida y es un resumen mucho mejor y una forma más fácil de captar las ideas que la manera tradicional; solo eso ya vale la pena.

@austinakon

Me encanta esta app. La he usado varios días y no puedo dejar de escuchar. Una forma buenísima de empezar.

@jcrules328

Me gusta mucho el programa; llevo alrededor de un mes probándolo y siento que es una verdadera joya. Funciona genial porque puedo usar BeFreed para crear mis propios temas, y la voz es buenísima, con opciones de narración ilimitadas.

@DanielCZ

En serio, todavía no he explorado la app a fondo, pero después de usarla estos últimos días estoy impresionadísima… BeFreed está en otro nivel comparada con cualquier otra app de aprendizaje que haya usado. Te engancha muchísimo y de verdad mejora la concentración, ¡ideal para los que no paran de hacer scroll!

@ladyInfinity

Compré BeFreed hace exactamente 23 días y lo he usado todos los días desde entonces. Se ha integrado por completo en mi rutina diaria de trabajo y aprendizaje.

@jayallen

La verdad es que la app ha superado todas mis expectativas. Puedo pedirle que genere audio sobre cualquier tema, sea cual sea, y el resultado es impresionante. Mi campo profesional es una especialización en psicoterapia y es multidisciplinario; aun así, las respuestas son muy precisas.

@Raguipa

Lo que más valoro es cuánto ha reducido mi scroll: paso menos tiempo buscando y más tiempo absorbiendo información. La combinación de audiolibros completos, podcasts y los planes de aprendizaje es brillante.

@colonyofcreatorsNGO

Llevo 24 años siendo instructor de aprendizaje acelerado PhotoReading… los libros, la lectura y el aprendizaje son lo mío, y BeFreed ha hecho un gran trabajo ofreciendo un enfoque innovador para transmitir información de una forma fácil de consumir.

@BeFreed user

No es solo una app de resúmenes de libros: he usado la opción de lectura divertida y es un resumen mucho mejor y una forma más fácil de captar las ideas que la manera tradicional; solo eso ya vale la pena.

@austinakon

Me encanta esta app. La he usado varios días y no puedo dejar de escuchar. Una forma buenísima de empezar.

@jcrules328

Me gusta mucho el programa; llevo alrededor de un mes probándolo y siento que es una verdadera joya. Funciona genial porque puedo usar BeFreed para crear mis propios temas, y la voz es buenísima, con opciones de narración ilimitadas.

@DanielCZ

Me encanta poder recibir información e ideas útiles y condensadas en un audio estilo podcast de 8 a 15 minutos. No soy muy fan de los podcasts por tanto relleno, pero esto va directo al grano.

@BeFreed user

Estoy terminando mi doctorado y tengo que leer muchísimo material desconocido… Con BeFreed simplemente escribes un prompt y la app encuentra las fuentes por ti y genera un podcast en audio. El proceso de BeFreed me parece más ágil que el de NotebookLM.

@Brad

Suelo buscar en YouTube algo que escuchar mientras preparo el desayuno, salgo a caminar o voy al trabajo, ¡y BeFreed ofrece un enfoque aún más certero, sin anuncios y sin relleno!

@BeFreed user

Lo mejor de esta plataforma es su versatilidad. Literalmente no hay tema que quede fuera. Le lanzas lo que sea y lo maneja… Es raro encontrar una herramienta de aprendizaje sin limitaciones que de verdad cumpla lo que promete.

@jayallen

BeFreed es fantástica. Su diseño intuitivo hace que pase menos tiempo navegando y más tiempo aprendiendo. La mezcla de audiolibros, podcasts y planes de aprendizaje es una combinación genial que ha cambiado por completo mi rutina diaria.

@BeFreed user

Al principio me llevó un rato entender cómo crear podcasts en italiano y ¡boom! ¡Es genial! Puedo pedirle que me explique cualquier tema y lo hace súper bien y con mucha inteligencia.

@matteo77

BeFreed se ha convertido en mi app diaria de audiolibros… Lo que más me gusta es que pones tu texto y te devuelve un audio que puedes escuchar donde sea.

@kotanzu1

Me encanta poder recibir información e ideas útiles y condensadas en un audio estilo podcast de 8 a 15 minutos. No soy muy fan de los podcasts por tanto relleno, pero esto va directo al grano.

@BeFreed user

Estoy terminando mi doctorado y tengo que leer muchísimo material desconocido… Con BeFreed simplemente escribes un prompt y la app encuentra las fuentes por ti y genera un podcast en audio. El proceso de BeFreed me parece más ágil que el de NotebookLM.

@Brad

Suelo buscar en YouTube algo que escuchar mientras preparo el desayuno, salgo a caminar o voy al trabajo, ¡y BeFreed ofrece un enfoque aún más certero, sin anuncios y sin relleno!

@BeFreed user

Lo mejor de esta plataforma es su versatilidad. Literalmente no hay tema que quede fuera. Le lanzas lo que sea y lo maneja… Es raro encontrar una herramienta de aprendizaje sin limitaciones que de verdad cumpla lo que promete.

@jayallen

BeFreed es fantástica. Su diseño intuitivo hace que pase menos tiempo navegando y más tiempo aprendiendo. La mezcla de audiolibros, podcasts y planes de aprendizaje es una combinación genial que ha cambiado por completo mi rutina diaria.

@BeFreed user

Al principio me llevó un rato entender cómo crear podcasts en italiano y ¡boom! ¡Es genial! Puedo pedirle que me explique cualquier tema y lo hace súper bien y con mucha inteligencia.

@matteo77

BeFreed se ha convertido en mi app diaria de audiolibros… Lo que más me gusta es que pones tu texto y te devuelve un audio que puedes escuchar donde sea.

@kotanzu1

Ver más sobre cómo se habla de BeFreed en la web

Comienza tu viaje de aprendizaje, ahora

Capítulo 7

Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Descripción general: Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Explora el Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios con distintos estilos de aprendizaje

El botón de los 57 millones de dólares

Paso uno: definir qué significa ganar

Ve cada palabra mientras la escuchas

Buscar el máximo global

Menos es más: el principio de sustracción

Saca más partido al Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Las palabras importan: el poder de la llamada a la acción

Fracasa rápido y aprende

Ve cada palabra mientras la escuchas

Crear el equipo ideal

Más allá de la página web: correo, precios y personalización

Saca más partido al Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

El juego a largo plazo: cultura, iteración y lo que viene después

Has llegado al final del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Temas clave del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Mejores citas del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Personajes del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Sobre el Autor

Descargar resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

A los usuarios también les gustó

Preguntas frecuentes sobre el Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

What is A/B Testing by Dan Siroker about?

Who should read A/B Testing?

Is A/B Testing worth reading?

How did Dan Siroker use A/B testing in Obama’s campaign?

Descubre más

BeFreed Reúne a una Comunidad Global de Mentes Curiosas

Explora el Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios con distintos estilos de aprendizaje

El botón de los 57 millones de dólares

Paso uno: definir qué significa ganar

Ve cada palabra mientras la escuchas

Buscar el máximo global

Menos es más: el principio de sustracción

Saca más partido al Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

Las palabras importan: el poder de la llamada a la acción

Fracasa rápido y aprende

Ve cada palabra mientras la escuchas

Crear el equipo ideal

Más allá de la página web: correo, precios y personalización

Saca más partido al Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

El juego a largo plazo: cultura, iteración y lo que viene después

Has llegado al final del Resumen de A/B Testing: Cómo convertir clics en clientes y confianza en beneficios

A los usuarios también les gustó

Descubre más