# El grupo de control y el holdout: demostrar que tu trabajo ha servido de algo > Los tests sueltos te dicen si un cambio funcionó. Un holdout te dice si un año de cambios funcionó, y la respuesta a veces es incómoda. - Source: https://bixlow.com/es/blog/grupo-de-control-holdout-que-has-conseguido - Language: es - Published: 2026-10-17T09:00:00.000Z - Updated: 2026-10-06T09:28:18.400Z - Author: fernando - Topics: grupo de control, diseño de experimentos, programa de experimentación, A/B testing, significancia estadística, CRO, exclusión mutua - Publisher: Bixlow --- Tu grupo de control es la versión de la realidad en la que no hiciste nada. Todo lo que afirmas sobre tu experimento es una comparación contra él, lo que lo convierte en la parte más importante y menos comentada del montaje. ## Por qué "antes y después" no es un control El sustituto más habitual de un grupo de control es comparar este mes con el anterior. Casi siempre está mal, porque entre los dos meses cambió tu mezcla de tráfico, cambió tu inversión en anuncios, cambió la temporada y posiblemente un competidor hizo algo. Un control de verdad es *concurrente*: los mismos días, las mismas campañas, el mismo tiempo, todo igual, diferenciándose solo en qué versión de la página vieron. Esa simultaneidad es toda la gracia. Cualquier cosa medida en secuencia está contaminada por el tiempo. Esto importa sobre todo en los resultados que más convencen. "Rediseñamos el checkout y la conversión subió un 20%" es una frase sin grupo de control dentro, y es el tipo de afirmación que moldea un año de roadmap. ## El problema de la acumulación Esto es lo que los experimentos sueltos no pueden decirte. A lo largo de un año lanzas doce tests, ganan siete, y cada victoria es de un 3-8%. Multiplícalas y deberías estar un 30% arriba o más. ¿Lo estás? Normalmente no, y hay razones honestas. Algunas "victorias" fueron falsos positivos. Algunos efectos se apagaron cuando pasó la novedad. Algunos cambios interactuaron y sus ganancias se solaparon en vez de sumarse. Y tu línea base se movió por motivos ajenos a todo esto. La única forma de averiguarlo es un holdout: una porción pequeña de tráfico —normalmente el 5-10%— excluida sistemáticamente de todo lo que publicas, durante un periodo largo. Al final del trimestre comparas el holdout contra el resto, y esa diferencia es el efecto acumulado real de tu programa. ## Lo que cuesta un holdout y lo que vale Te cuesta la mejora que esos visitantes no recibieron. Si tus cambios valen de verdad un 20%, lo estás dejando sobre la mesa para el 5% del tráfico. Es un coste real y cuantificable. Lo que compras es la única respuesta honesta a "¿está funcionando algo de esto?". Para una marca pequeña que decide si sigue invirtiendo tiempo en experimentación, esa respuesta merece la pena tenerla, y es además el número que enseñar a quien pregunte si el CRO compensa. El compromiso práctico: mantén un holdout un trimestre, no de forma permanente. Dos o tres puntos de medición al año bastan para saber si tu programa compone, sin gravar tu facturación para siempre. En Bixlow un holdout es una audiencia excluida permanentemente de un conjunto de experimentos: la misma maquinaria de exclusión que los tests excluyentes, apuntada a un grupo persistente en vez de a uno temporal. La persistencia importa enormemente aquí: un visitante del holdout que se cuela en una variante contamina una medición que solo vas a tomar una vez por trimestre. ## Cuando la respuesta decepciona A veces el holdout muestra menos mejora de la que prometían tus tests individuales. Eso no es motivo para dejar de experimentar: es motivo para fiarte más de tu proceso y menos de tus resultados sueltos. En concreto suele significar: sube tu umbral de confianza, deja de publicar victorias marginales, lanza tests más largos sobre menos hipótesis, y comprueba si tus "victorias" estaban concentradas en un segmento y se diluyeron al desplegarlas en todas partes. Un programa que conoce su efecto acumulado real está en mucha mejor forma que uno que suma doce porcentajes optimistas y se cree el total. ## Claves - Un grupo de control tiene que ser concurrente. Comparar este mes con el anterior no es un control. - Las victorias sueltas no se multiplican limpiamente: falsos positivos, desgaste de la novedad y efectos solapados se comen el total. - Un holdout del 5-10% durante un trimestre es la única medida honesta de lo que ha conseguido todo tu programa. - Un holdout decepcionante significa apretar el proceso, no abandonarlo. --- ## Conoce nuestro agente de CRO con IA Lo que acabas de leer, puesto en marcha por un agente: entiende a tus visitantes, decide qué probar o personalizar, lo construye sobre tu web sin developer y te dice cuándo el resultado es real. https://bixlow.com/es/ai-cro-agent