MarketingHablemos
Edición · es

Insight

La auditabilidad como prerequisito: por qué el marketing con IA necesita trazas, no solo respuestas.

Por qué la capacidad de rastrear cada decisión de un sistema de IA importa más que la precisión de sus respuestas en marketing.

Creemos que la próxima línea divisoria en marketing con IA no será qué modelo genera mejor copy o segmenta mejor audiencias, sino cuáles organizaciones pueden demostrar cómo su sistema llegó a cada decisión. La evidencia que reunimos apunta a un patrón convergente: los avances más relevantes en agentes, LLMs y automatización están desplazando el valor desde la precisión de la respuesta hacia la integridad de la traza que la produce.

La respuesta correcta ya no basta

Dutta y Moharir lo formulan con claridad quirúrgica: un agente LLM que opera sobre datos estructurados puede producir una respuesta correcta mediante una traza de computación inválida, y la evaluación estándar por precisión de respuesta no lo detecta [11]. Denominan a este desfase Structure Gap — el razonamiento en lenguaje natural no especifica de forma fiable los programas a nivel de operador que los sistemas reales requieren. Para marketing, la implicación es directa: un agente que extrae el número correcto de leads de un CRM pero lo hace con una query que viola el esquema de datos es una bomba de relojería operativa. No falla hoy; falla el día que el esquema cambia.

La respuesta que proponen — Trace Integrity — exige siete propiedades simultáneas: que la computación sea explícita, ejecutable, válida respecto al esquema, fiel al operador, reproducible, consistente con la respuesta y auditable [11]. La lectura que hacemos es que este criterio debería convertirse en el estándar mínimo para cualquier agente que toque datos de negocio en un equipo de marketing, desde la extracción de métricas de campaña hasta la generación de reportes financieros de inversión publicitaria.

Medir lo que importa: grounding y coste, no solo F1

Zhang et al. presentan ExtractBench como el primer benchmark que evalúa simultáneamente precisión de valores, completitud de registros a escala, fundamentación (grounding) y coste medido [1]. La inclusión del coste como dimensión explícita es lo que nos parece más relevante para operaciones de marketing: un sistema de extracción que alcanza un F1 alto pero consume tokens de forma descontrolada al procesar contratos, briefs de medios o informes de atribución no es desplegable en la práctica.

La métrica de Grounding F1 a nivel de palabra y de página que introduce ExtractBench [1] es, desde nuestra perspectiva, el tipo de señal que falta en la mayoría de los pipelines de marketing automatizado. Cuando un agente extrae un dato de un brief creativo o de un contrato con un medio, no basta con que el dato sea correcto: el equipo legal o el controller necesitan saber de qué página, de qué cláusula sale ese número. Sin grounding verificable, la automatización no reemplaza al humano — le añade una tarea de verificación.

4.869 páginas / 370 documentos / 8 dominiosEscala del corpus ExtractBench

El colapso del RAG ingenuo en documentos de negocio reales

Tamang, Vyas y Hazarika cuantifican algo que muchos equipos de marketing que han montado sistemas RAG sobre documentos financieros o regulatorios sospechan pero no miden: el diseño estándar de chunk + embedding es estructuralmente inadecuado para documentos tabulares [4]. En un informe financiero gubernamental de 780 páginas, el 86,8% de las líneas de contenido son filas de tabla. La cifra hereda su unidad de una cabecera que se encuentra, en mediana, 13 líneas por encima; los límites de chunk separan rutinariamente el número de su unidad, introduciendo errores de dos órdenes de magnitud.

Para un equipo de media buying que alimenta dashboards con datos extraídos de facturas y reportes de publishers, confundir «lakh» con «crore» — el tipo de error que el RAG ingenuo introduce — es un error de 100x en el dato de inversión.

86,8%
Líneas de contenido que son filas de tabla en el documento analizado
[4]
4.869 páginas / 370 documentos / 8 dominios
Escala del corpus ExtractBench
[1]

RAG denso con chunker consciente de tablas: resuelve el problema de unidades pero deja entre el 27% y el 30% de los chunks numéricos sin cabecera de año fiscal, independientemente del tamaño de chunk [Fuente 4].

READ (Embedding-free Agentic Document-search): el agente accede al documento bruto mediante búsqueda léxica normalizada y navegación estructural, eliminando la pérdida de contexto tabular [4].

Lo que la adopción empresarial real nos dice sobre quién usa IA y cómo

El análisis de Chatterji et al. sobre más de 1.500 organizaciones y más de 17 millones de mensajes en ChatGPT Enterprise hasta marzo de 2026 revela un dato que debería reconfigurar cómo los departamentos de marketing planifican su adopción de IA: la intensidad de uso es especialmente elevada entre trabajadores de menor antigüedad (early-career workers) [6]. Esto invierte la intuición habitual de que la IA se adopta top-down. En marketing, los analistas junior, los coordinadores de campaña y los ejecutivos de cuentas están usando herramientas generativas con más intensidad que sus directores — pero probablemente con menos supervisión sobre la calidad de las trazas.

La adopción se concentra en empresas de mayor tamaño, mayor valoración y mayor intensidad de gasto en I+D y SG&A [6]. La categoría SG&A — que incluye marketing y ventas — no es un accidente: es precisamente donde el trabajo del conocimiento es más diverso y menos estandarizado, y donde los LLMs encuentran más superficie de aplicación. Que el uso abarque redacción, trabajo técnico, comunicación y síntesis de información [6] confirma que no estamos ante una herramienta de nicho sino ante una infraestructura transversal.

Leshchikova et al. identifican una asimetría que la industria del marketing agéntico está ignorando: la disposición a enviar comunicación mediada por un agente y la disposición a recibirla son constructos distintos — altamente correlacionados (ρ = 0,92) pero separables [10]. El estudio, basado en dos encuestas a gran escala (N = 2.894 y N = 2.617), demuestra que diseñar un chatbot de ventas o un agente de prospección que funcione bien desde la perspectiva del emisor no garantiza que el receptor lo acepte.

Grispos y Qureshi añaden otra capa al documentar que, en aplicaciones móviles de e-commerce en Nigeria, la IA está ampliamente implementada pero la transparencia sobre su uso permanece limitada [5]. Los mecanismos de divulgación no informan adecuadamente a los usuarios sobre qué funcionalidades de IA están activas. Creemos que esta falta de transparencia no es solo un problema ético — es un riesgo de negocio. Un usuario que descubre a posteriori que interactuó con un agente sin saberlo tiene una reacción más negativa que uno al que se le ofreció un mecanismo de opt-in claro.

Kato y Kato formalizan el problema del handover de estado ICL entre sesiones [7]: cuando la conversación supera el límite de contexto o la aplicación se reinicia, qué información se transmite determina si el agente que continúa produce salidas equivalentes al original. En marketing, esto ocurre constantemente — un chatbot de atención al cliente que pasa de un turno a otro, un agente de planificación de medios cuya sesión se interrumpe. Los autores demuestran que la tensión entre recuperación exacta del material anterior y preservación de la distribución objetivo de respuestas no es trivial de resolver [7].

Y cuando medimos la calidad de nuestros agentes, ¿con qué la medimos? Koren, Bar-Haim y Goldsteen documentan que los benchmarks de agentes conversacionales orientados a tareas pueden contener tareas inconsistentes, escenarios simplistas y cobertura limitada de políticas [3]. Su framework sin referencia usa jueces LLM para diagnosticar estas debilidades. La implicación para marketing: si evaluamos un agente de servicio al cliente contra un benchmark deficiente, los resultados son directamente engañosos [3].

Nuestra posición

Wu argumenta que concatenar múltiples fuentes en un único prompt conflaciona la interpretación de cada fuente con la agregación de decisiones, y que separar ambas operaciones es estructuralmente necesario [8]. La interfaz que propone — una tupla de evidencia de cuatro campos: hypothesis, reliability bucket, rationale y provenance — es exactamente el tipo de disciplina arquitectónica que necesitan los sistemas de marketing que consolidan datos de múltiples plataformas publicitarias, CRMs y herramientas de analytics [8]. El fallo que identifica — count-scale drift en la agregación — es el equivalente LLM de sumar métricas con unidades distintas sin normalizar.

Desde IDO, la tesis que defendemos es esta: la madurez de un equipo de marketing en IA no se mide por cuántos agentes ha desplegado, sino por cuántos de esos agentes producen trazas que un tercero puede auditar, reproducir y cuestionar. Trace Integrity [11], Grounding F1 [1], separación de interpretación y agregación [8] — estos no son problemas de investigación académica. Son los estándares operativos mínimos para que la automatización de marketing deje de ser una apuesta y se convierta en infraestructura.

Fuentes consultadas

  1. Boyang Zhang, Adrian Lyjak, Eli Stewart, Zhaoqi Li, and Simon Suo. ExtractBench: A Benchmark for Schema-Guided Enterprise Document Extraction. arXiv:2607.29677, 2026.
  2. Zhen Fang, Yu Zeng, Wenxuan Huang, Yiming Zhao, Shiting Huang, Tianfei Ren, Qi Lu, Qingnan Ren, Qisheng Su, Lionel Z. Wang, Qingyu Yin, Shuang Chen, Zehui Chen, Lin Chen, Zhenfei Yin, Yao Hu, Shaohui Lin, Wanli Ouyang, Shaosheng Cao, and Feng Zhao. Video-DeepResearch: Towards the Next-Generation Multimodal Deepresearch Agent. arXiv:2608.03979, 2026.
  3. Noam Koren, Roy Bar-Haim, and Abigail Goldsteen. Benchmarking the Benchmarks: Evaluating Benchmarks for Conversational Agents. arXiv:2608.06329, 2026.
  4. Sagar Tamang, Ayush Vyas, and Tabarakul Hazarika. Beyond Top-K: Replacing Black-Box Retrieval with Interpretable Agentic Operations. arXiv:2608.06305, 2026.
  5. George Grispos and Sajda Qureshi. Investigating Artificial Intelligence Digital Sovereignty in Mobile Shopping Apps: A Case Study of Nigeria. arXiv:2608.06364, 2026.
  6. Aaron Chatterji, David Holtz, Neel Rakholia, Prasanna Tambe, and Gawesha Weeratunga. How Organizations Use AI: Evidence from ChatGPT. arXiv:2608.12236, 2026.
  7. Masahiro Kato and Taka Kato. Handover of In-Context Learning State Across Session Boundaries. arXiv:2608.14528, 2026.
  8. Zhelun Wu. Split the Labor: Separating Evidence Interpretation from Decision Aggregation. arXiv:2608.14509, 2026.
  9. Adam Fisch, Shubhendu Trivedi, Fantine Huot, William W. Cohen, Michael Kaisers, Mirella Lapata, Kate Larson, and Jacob Eisenstein. Pandora's AI Model Routing Box: Efficient Allocation with Costly Value Estimation. arXiv:2608.20316, 2026.
  10. Daria Leshchikova, Valentina V. Kuskova, Dmitry Zaytsev, and Valerii Klimov. Delegation Asymmetry in Agentic Recommender Systems: Measuring Two-Sided Receptivity in Online Dating. arXiv:2608.18058, 2026.
  11. Srimonti Dutta and Akshata Kishore Moharir. Trace Integrity for LLM Data Agents: A Vision for Auditable Structured Reasoning in Real-World Systems. arXiv:2608.26036, 2026.
  12. Shijie Wang, Honglu Zhou, Ziyang Wang, Ran Xu, Caiming Xiong, Silvio Savarese, Chen Sun, and Juan Carlos Niebles. Evidence-Backed Video Question Answering. arXiv:2607.11862, 2026.