El fantasma en la máquina: nivel no identificado y sesgo de contaminación
Watson et al. demuestran que en experimentos espaciales con aleatorización por conglomerados, los datos identifican la forma del kernel de spillover pero no su nivel: este queda aliasado con el intercepto y el efecto directo, sin importar el tamaño muestral ni el modelo de resultado [8]. La consecuencia es directa para cualquier test de incrementalidad que opere sobre unidades geográficas (ciudades, códigos postales, tiendas): todo estimador descansa en un supuesto de anclaje que fija ese nivel, y la elección de anclaje determina la magnitud del efecto estimado. No es un detalle técnico; es la decisión que estructura el resultado.
El marco de Watson et al. descompone el sesgo de cualquier estimador anclado en tres términos computables antes de recoger datos: un término de nivel, un error de forma del kernel y un término de filtración absorbido por la geometría del diseño [8]. Esto significa que un equipo de medición puede —y debería— auditar su exposición al sesgo en la fase de diseño, no post-hoc. El análisis estándar de ensayo por conglomerados resulta ser un caso especial con anclaje implícito, cuyo sesgo por contaminación queda en forma cerrada dentro de este marco.
La base de evidencia está inflada: el efecto verdadero es una fracción del publicado
Ganong, Garg y Kasy construyen un toolkit de meta-análisis que corrige por sesgo de selección en la literatura publicada. Sus resultados empíricos —en economía laboral, pública, del comportamiento, ambiental y del desarrollo— son contundentes: el efecto medio corregido por selectividad se sitúa entre el 12 % y el 21 % de la media simple no corregida [4]. Dicho de otro modo, la media publicada sobreestima el efecto verdadero entre aproximadamente 5 y 8 veces. La lectura que hacemos desde IDO es que cualquier benchmarking de incrementalidad que tome al pie de la letra los tamaños de efecto reportados en la literatura arrastra una inflación de ese orden.
El toolkit permite realizar predicciones para nuevos contextos mediante reponderación con covariables, haciendo explícitos los supuestos de transporte de efectos [4]. Esto es crucial: cuando trasladamos un lift estimado en un mercado a otro, la transparencia del supuesto de transporte deja de ser un lujo académico y se convierte en la diferencia entre una decisión informada y una conjetura decorada con cifras.
El multiverso de especificaciones: la conclusión depende de decisiones que rara vez se reportan
Saraceno y Calcagnì formalizan algo que todo analista sabe pero pocos documentan: cambiar la ventana temporal, el conjunto de controles o la transformación de la variable dependiente puede producir conclusiones divergentes [9]. Su marco geométrico representa cada especificación como una distribución sobre un espacio de salida común, midiendo tanto la variación del efecto como la variación de la incertidumbre —información que los resúmenes escalares convencionales pierden.
Resúmenes estándar del multiverso (curvas de especificación, p-valores agregados) colapsan la incertidumbre en un escalar, ocultando cómo se distribuye entre especificaciones.
El marco distribucional-geométrico retiene simultáneamente variación de efecto y variación de incertidumbre, revelando vecindarios locales y diámetros del espacio de especificaciones [9].
El diseño importa más que el modelo: tres guías concretas
La evidencia sobre diseños con resultados binarios —tasa de conversión, indicador de compra— refuerza la primacía del diseño. Azriel, Krieger y Kapelner demuestran que cualquier diseño balanceado que satisfaga una condición de balance de covariables es asintóticamente óptimo en varianza, y que los diseños de bloqueo satisfacen esta condición bajo supuestos de suavidad moderados [7]. Sin embargo, la varianza depende de probabilidades de éxito desconocidas, haciendo imposible su estimación insesgada. Sus estimadores conservadores basados en CMH son asintóticamente ajustados bajo alternativas locales, produciendo intervalos de confianza válidos [7]. Para tests de incrementalidad con KPIs binarios, el bloqueo con inferencia CMH ofrece un marco simultáneamente óptimo, conservador en muestras finitas y asintóticamente ajustado.
En adopción escalonada —lanzamientos graduales por mercado, activaciones regionales secuenciales—, Bordino, Berrett y Klopp muestran que la estimación directa del funcional bilineal, sin completar el tensor entero, puede ser más eficiente. Su algoritmo espectral exhibe una transición de fase en el número de capas que indica cuándo agregar mercados mejora la estimación y cuándo no [6]. Esto tiene implicaciones prácticas inmediatas: añadir oleadas al rollout no siempre mejora la precisión; la ganancia depende del número de unidades de tratamiento disponibles en cada oleada.
La identificación de elasticidades de demanda ilustra otro límite estructural: Haddad et al. demuestran que los diseños de IV transversal y diferencia en diferencias identifican la elasticidad relativa pero no los patrones de sustitución, porque los coeficientes sobre los observables absorben mecánicamente la sustitución —el problema del coeficiente faltante [2]. Para medición de marketing, la analogía es directa: un diseño que identifica el efecto incremental de un canal relativo a otro puede no decirnos nada sobre cómo se redistribuye la demanda cuando se retira ese canal.
Proxies de IA y la ilusión de observabilidad completa
El uso creciente de LLMs para generar covariables —puntuaciones de sentimiento, clasificaciones, expectativas— introduce riesgos específicos que Duan y Pelger documentan rigurosamente. Las características generadas por modelos de lenguaje pueden invalidar la inferencia cuando sus errores sistemáticos (alucinación, sesgo de anticipación) distorsionan las condiciones de momento del estimador downstream [1]. Incluso tras corrección, estas variables son proxies ruidosos cuyos perfiles de error varían entre modelos y entre prompts. El marco AI-PI propuesto por los autores requiere un conjunto de calibración etiquetado humanamente para corregir sesgo específico por momento y una ponderación adaptativa que combina múltiples pares modelo-prompt [1].
La lección para medición de incrementalidad: si usamos variables generadas por IA como controles o como criterios de segmentación en un test, estamos introduciendo error dependiente del input cuya estructura desconocemos. Sin un conjunto de calibración humana y sin la corrección de momento que AI-PI formaliza, la inferencia resultante puede tener sesgo no acotable [1].
Lo que un solo experimento no puede enseñar
El experimento de campo de Akram et al. sobre cloración del agua en Pakistán revela un patrón que creemos se traslada a la adopción de prácticas de medición: el aprendizaje experiencial propio y el aprendizaje social son complementarios, y ninguno basta por sí solo [3]. Un año después de la intervención, solo los hogares que habían experimentado directamente el efecto y tenían vecinos que también lo habían experimentado mantuvieron el cambio de comportamiento, con mejoras en salud infantil de 0,08 desviaciones estándar respecto a los demás grupos [3]. Los hogares con solo experiencia propia o solo exposición social no sostuvieron el cambio.
Para equipos de marketing, la implicación es que un piloto de medición de incrementalidad que no se acompañe de una comunidad de práctica interna —peers que hayan vivido el mismo proceso de aprendizaje— tiene alta probabilidad de no alterar las decisiones de inversión de forma duradera. La heterogeneidad de efectos según el entorno social del hogar/equipo no es ruido; es el mecanismo central [3].
La posición de IDO
Nuestra lectura del cuerpo de evidencia es que la medición de incrementalidad madura no se distingue por la sofisticación de su modelo, sino por la transparencia de tres decisiones: qué supuesto de anclaje fija el nivel del spillover [8], qué corrección aplica al prior extraído de la literatura [4], y cuánta variación entre especificaciones tolera antes de declarar un resultado [9]. Un equipo que documenta estas tres decisiones y las somete a escrutinio está haciendo medición causal. Un equipo que reporta un lift puntual sin mostrar su anclaje, su prior ni su multiverso está haciendo teatro con intervalos de confianza.
Fuentes consultadas
- Inferencia con covariables generadas por IA: sesgo sistemático, ruido y el marco AI-PI
- Inferencia causal para elasticidad de demanda: variables instrumentales, diferencia en diferencias y el problema del coeficiente faltante
- Aprendizaje experiencial y social: evidencia de un experimento de campo sobre adopción de comportamiento
- Síntesis de literatura y corrección del sesgo de selección en meta-análisis aplicado
- Diferencia en discontinuidades (difference-in-discontinuities): identificación en experimentos naturales con fronteras geográficas
- Alberto Bordino, Thomas B. Berrett, and Olga Klopp. Direct and efficient estimation of bilinear forms in staggered tensor panels. arXiv:2607.06330, 2026.
- David Azriel, Abba M. Krieger, and Adam Kapelner. Optimal Designs with Robust Inference for Binary Treatment Effects. arXiv:2607.05768, 2026.
- Samuel I. Watson, Penny Hancock, Jack Fraser-Govil, Kieran DeWalt, and Thomas A. Smith. Embracing Spillover: Spatial Effects in Experiments. arXiv:2607.06506, 2026.
- Giovanni Saraceno and Antonio Calcagnì. Towards a Geometric Characterization of Multiverse Analysis. arXiv:2607.11345, 2026.