En su libro “Experimentation works: The surprising power of business experiments” el autor Stefan H. Thomke nos habla de 7 mitos en la experimentación que influyen en los negocios.
| Mito | Hecho |
| “La innovación impulsada por la experimentación acabará con la intuición y el juicio”. | La intuición y el juicio pueden ser fuente de hipótesis y complementar la experimentación. |
| Mito | Hecho |
| “Los experimentos en línea conducirán a una innovación incremental, pero no a cambios revolucionarios en el rendimiento”. | Los experimentos en línea son fundamentales para la exploración y la optimización. Los avances en el rendimiento pueden surgir de un flujo continuo de innovación incremental que opera en muchos clientes durante largos períodos de tiempo. |
| Mito | Hecho |
| “No tenemos suficientes hipótesis para la experimentación a gran escala”. | Todas las organizaciones de experimentación comenzaron siendo pequeñas y mejoraron con el tiempo. La mayoría de las empresas no realizan miles de experimentos al año. |
| Mito | Hecho |
| “Las empresas tradicionales no tienen suficientes transacciones para realizar experimentos”. | Los experimentos empresariales se pueden ejecutar en entornos con pocas transacciones y con muchas transacciones, tanto fuera de línea como en línea. |
| Mito | Hecho |
| “Probamos las pruebas A/B, pero tuvieron un impacto modesto en el desempeño de nuestro negocio”. | Dominar la experimentación empresarial es fundamental para la competitividad empresarial. ¿Cuál es el retorno de la inversión al respirar? |
| Mito | Hecho |
| “Comprender la causalidad ya no es necesario en la era del big data y el análisis empresarial. ¿Por qué perder el tiempo en experimentos?”. | Los análisis de big data nos brindan información sobre las correlaciones. Estos conocimientos son excelentes fuentes para nuevas hipótesis y experimentos que prueban la causalidad. Big data y experimentos se complementan. |
| Mito | Hecho |
| “Realizar experimentos con clientes sin el consentimiento previo siempre es poco ético”. | Los experimentos deben ser éticos y ganarse la confianza de los clientes. Pero el mayor riesgo es que las empresas no experimenten lo suficiente y renuncien a la innovación. |
Valor de la experimentación en UX
- Base decisiones en evidencia, no en suposiciones. Esto permite validar con usuarios reales qué funciona y qué no, en lugar de seguir la intuición o la “opinión del experto”. Reduce además el riesgo de invertir recursos en ideas que no generan impacto.
- Se centra en el usuario. Pone la voz del usuario en el centro del diseño. Ayuda a descubrir necesidades latentes que no se obtienen con encuestas o entrevistas únicamente.
- Mejora continua y aprendizaje. A través de pruebas A/B, prototipado y pruebas de usabilidad, se promueve un ciclo constante de iteración. Cada experimento genera datos accionables para perfeccionar la experiencia.
- Impacto en las métricas del negocio. Una buena UX impacta en conversión, retención y satisfacción al cliente. La experimentación muestra con datos el vínculo entre cambios de diseño y resultados medibles.
Otros mitos comúnes
- “La experimentación es costosa y lenta” → Hoy existen herramientas de prototipado rápido y test remoto que hacen que experimentar sea ágil y barato.
- “Conozco a mis usuarios, no necesito probar” → Los usuarios suelen comportarse de forma inesperada; lo que funciona en teoría no siempre funciona en la práctica.
- “Un solo test es suficiente” → La UX cambia con el tiempo y el contexto, por lo que la experimentación debe ser continua.
- “La experimentación frena la innovación” → Al contrario: permite probar ideas innovadoras con bajo riesgo antes de escalarlas.
En resumen
La experimentación UX tienen un valor muy claro frente a los mitos que suelen rodear a la experimentación en general.
El valor de la experimentación en UX radica en que convierte la incertidumbre en conocimiento práctico y medible, mientras que los mitos tienden a sobrestimar el costo o subestimar la necesidad de probar, impidiendo así la innovación informada.
Bibliografía
Thomke, Stefan H.. Experimentation Works: The Surprising Power of Business Experiments (English Edition) (p. 251). Harvard Business Review Press. Edición de Kindle.
OpenAI. (2025). ChatGPT (versión GPT‑4) [Valor de la experimentación UX frente a los mitos de la experimentación]. https://chat.openai.com/
