Gartner predicts 30% of generative AI projects will be abandoned after proof of concept by end of 2025
Comunicado de prensa de Gartner, 29 de julio de 2024.
La mayoría de los pilotos de IA se estancan por los datos, el costo y un valor poco claro; elegir primero la decisión adecuada evita casi todo eso.
Gartner preveía que al menos el 30% de los proyectos de IA generativa se abandonarían después de la prueba de concepto para finales de 2025, y citaba la mala calidad de los datos, controles de riesgo insuficientes, costos crecientes y un valor de negocio poco claro (Gartner, julio de 2024). En junio de 2025 pronosticó que más del 40% de los proyectos de IA agéntica se cancelarán para finales de 2027 por motivos similares, y señaló que muchos casos de uso presentados como agénticos no requieren implementaciones agénticas (Gartner, junio de 2025).
La mayoría de estas causas se resuelven antes de construir ningún modelo, con la elección de la decisión, la medida del éxito y el plan para operar el resultado todos los días.
Elija una decisión antes de elegir una tecnología: aprobar un pago, fijar un límite de crédito, derivar una solicitud, decidir quién recibe una oferta. Cinco preguntas la describen lo bastante bien como para planificar un piloto.
Las respuestas indican la herramienta. La mayoría de los procesos usan más de una, encadenadas para que el paso rápido y económico decida dónde invierte su tiempo el más costoso.
Sus costos tienen formas distintas. Un agente es barato de poner en marcha y se paga en cada caso. Un modelo predictivo requiere una inversión inicial en datos y entrenamiento, y después cuesta muy poco por decisión, aunque mantenerlo en buen estado es un costo recurrente. Los precios están bajando: Epoch AI midió que el precio de un determinado nivel de desempeño de los modelos cae entre 9 y 900 veces por año según la tarea, y señaló que las caídas más rápidas son recientes y podrían no mantenerse (Epoch AI, marzo de 2025).
Antes de que comience el piloto, déjelo por escrito y pida al responsable de la decisión que lo firme.
Así el equipo de finanzas recibe un resultado que puede comprobar, y no una afirmación que debe aceptar por confianza.
Ejecute el piloto primero con su propio historial y después con tráfico real junto al sistema actual, en modo sombra: el modelo nuevo puntúa cada caso y no decide nada. Los clientes no ven ningún cambio y el equipo compara ambos sistemas con los mismos casos. Los conjuntos de datos públicos y las pruebas comparativas de los proveedores rara vez reflejan a sus clientes y sus patrones de fraude.
El modo sombra también muestra con qué frecuencia los datos llegan tarde o incompletos, cuánto tardan las respuestas en horas pico y dónde discrepan los dos sistemas. Revise una muestra de esas discrepancias con las personas que toman hoy la decisión.
La mayor parte del trabajo entre un buen piloto y un sistema en producción es de ingeniería y gobernanza. Empiécelo mientras el piloto está en marcha.
Los supervisores lo esperan. La guía revisada de riesgo de modelos de Estados Unidos, de la Reserva Federal, la OCC y la FDIC (SR 26-2, abril de 2026, que sustituyó a la SR 11-7), indica que la validación suele realizarse antes del primer uso de un modelo, y abarca el análisis de resultados y la supervisión continua. En los EAU, el Banco Central, la SCA, la DFSA y la FSRA emitieron conjuntamente en 2021 directrices para las instituciones financieras que adoptan tecnologías habilitadoras, entre ellas la inteligencia artificial. Incorpore a los equipos de cumplimiento y de riesgo de modelos al propio piloto.
El presupuesto de un piloto suele cubrir licencias e ingeniería. El de producción debería expresarse por decisión e incluir la inferencia, la integración, la supervisión, el reentrenamiento y el tiempo de las personas que revisan los casos señalados. Un modelo que envía más casos a revisión puede costar más de lo que ahorra.
Informe el cambio en el resultado por decisión, multiplicado por el volumen, menos el costo total, medido frente al grupo de control.
Los pilotos de Mantika se ejecutan con sus propios datos, junto a sus sistemas actuales, y nada entra en producción hasta que usted lo apruebe.
Comunicado de prensa de Gartner, 29 de julio de 2024.
Comunicado de prensa de Gartner, 25 de junio de 2025.
Epoch AI, 12 de marzo de 2025.
Junta de Gobernadores del Sistema de la Reserva Federal, con la OCC y la FDIC, 17 de abril de 2026. Sustituye a la SR 11-7 (2011).
CBUAE, SCA, DFSA y FSRA, anunciado por la DFSA, 15 de noviembre de 2021.