Casi ningún proyecto de IA en una pyme se cancela por falta de tecnología. Se cancela, o se arrastra sin dar resultado, porque nadie fijó de antemano qué había que medir, cuándo parar y quién decidía escalar. Este checklist no explica cómo calcular el ROI —eso ya lo cubrimos en detalle en Cómo medir el ROI de la IA en una pyme—; aquí el objetivo es más operativo: una lista de comprobación fase a fase para que un responsable de proceso, sin ser especialista técnico, pueda revisar si un proyecto de IA está listo para arrancar, si el piloto merece continuar y si el resultado justifica escalarlo a toda la organización.
Un checklist de ROI no sustituye la medición: solo evita los errores más frecuentes por los que un proyecto llega al final del piloto sin datos suficientes para decidir nada. Cada punto de esta lista responde a una pregunta muy concreta: «¿tenemos esto por escrito antes de necesitarlo?».
Cómo usar este checklist
Está organizado en cuatro fases (antes de aprobar, durante el piloto, antes de escalar y ya en producción) más un bloque final con ocho señales de que el ROI es ficticio. No hace falta completar las cuatro fases en una sesión: lo práctico es repasar la fase correspondiente en cada revisión del proyecto y dejar constancia de qué puntos están resueltos y cuáles no. Un proyecto con varios puntos sin marcar no está necesariamente mal planteado, pero sí avisa de dónde va a fallar la medición del retorno más adelante.
Fase 0 — Antes de aprobar el proyecto
- Proceso y propietario nombrados. El proceso candidato tiene un responsable de negocio identificado, más allá del patrocinador técnico. Sin propietario claro, nadie defiende el ROI cuando aparecen los primeros contratiempos.
- Problema de negocio antes que la herramienta. El punto de partida es algo medible, como el tiempo o el coste, no una tecnología concreta. «Probar un agente conversacional» no es un objetivo; «reducir el tiempo de primera respuesta sin bajar la satisfacción» sí lo es.
- Línea base recogida o planificada. Existen datos reales del proceso actual (volumen, tiempo por caso, coste, tasa de error, incidencias registradas) o hay un plan concreto para recogerlos antes de lanzar el piloto. Sin línea base, cualquier mejora que se anuncie después es una afirmación, no una medición.
- Alternativa sin IA identificada. Se ha valorado qué pasaría sin el proyecto: ajustar reglas y procesos, contratar, subcontratar o simplemente no actuar. El retorno de la IA solo tiene sentido comparado con esa alternativa real, no con la situación ideal.
- Presupuesto de coste total, más allá de la licencia. El presupuesto incluye integración, revisión humana, soporte, formación y gobierno del sistema, además de la licencia o el coste de uso del modelo. Proyectos como la automatización de procesos con IA suelen tener más coste de integración y mantenimiento que de licencia; si eso no está presupuestado desde el principio, aparece más tarde y descuadra el cálculo.
- Calidad y riesgo como criterios de parada. Se han fijado umbrales mínimos de calidad y máximos de riesgo antes de empezar, no al final del piloto. Una tasa de error que hoy parece aceptable puede no serlo si el proceso toca datos personales, pagos o decisiones que afectan directamente a un cliente.
- Decisor de escalado nombrado. Alguien con autoridad real para decidir «se escala», «se ajusta» o «se cancela» está identificado desde el primer día. Si nadie tiene ese mandato explícito, el proyecto avanza por inercia hasta convertirse en gasto fijo sin que nadie lo haya decidido conscientemente.
Fase 1 — Durante el piloto
- Piloto en sombra antes de automatizar de verdad. El sistema observa y propone sobre casos reales sin actuar todavía sobre el proceso, de forma que se puedan comparar sus resultados con lo que habría hecho una persona sin asumir riesgo operativo.
- Conjunto de prueba con casos difíciles. La muestra incluye excepciones, datos incompletos y casos límite, no solo los ejemplos más sencillos. Un piloto que solo ve casos fáciles entrega una calidad que no se sostiene después, en producción.
- Métrica de adopción registrada desde el primer día. Se anota cuánta gente usa realmente la herramienta, cuánta la abandona y cuánto tiempo tarda en aprenderla. La adopción no es un dato que se mira al final: si nadie la usa, el ROI no aparece por bueno que sea el modelo.
- Registro de correcciones humanas y su motivo. Cada vez que una persona corrige lo que propone el sistema, queda anotado por qué. Esa lista es la que después permite saber si el error es puntual o si es un patrón estructural que hay que resolver antes de escalar.
- Coste real de operación, no proyectado. Al cerrar el piloto se conoce el coste real de inferencia, soporte e incidencias del periodo completo, no una proyección optimista extrapolada de la primera semana de uso.
- Ninguna definición de métrica cambia a mitad de piloto. Si al principio se mide solo el tiempo de ejecución y a mitad de camino se empieza a incluir también la revisión posterior, la comparación con la línea base deja de ser válida.
Fase 2 — Antes de decidir escalar
Ninguna decisión de escalar se toma solo por velocidad o por el entusiasmo del equipo que ha probado la herramienta. Calidad y riesgo son puertas eliminatorias: si no se superan, no importa cuánto tiempo diga ahorrar el sistema.
- Calidad mínima superada en los casos críticos. Las clases de error con mayor impacto (las que generan un pago indebido, una respuesta incorrecta a un cliente o un incumplimiento) cumplen el umbral exigido; la media general de aciertos por sí sola no basta.
- Coste por resultado válido, no por uso. El indicador que se compara con la línea base es el coste por tarea aceptada sin corrección material, no el coste por token, por consulta o por licencia contratada.
- Beneficio separado en realizado y proyectado. El informe de resultados distingue con claridad qué ahorro ya se ha observado de verdad durante el piloto y qué ahorro es una proyección para cuando el equipo esté más entrenado o el volumen sea mayor.
- Adopción real frente a mero acceso concedido. El indicador de uso mide las tareas susceptibles de resolverse con la herramienta que de verdad se resolvieron, no el número de cuentas activas ni de licencias asignadas.
- Riesgo residual aprobado por quien corresponde. La persona con autoridad para asumir el riesgo que queda después de aplicar los controles ha dado el visto bueno explícito, no un silencio administrativo que nadie ha cuestionado.
- Plan de soporte y mantenimiento asignado. Alguien es responsable de mantener el sistema, revisar sus resultados y atender incidencias una vez pase de piloto a producción. Sin presupuesto ni persona asignada para ello, el ROI del piloto no sobrevive al primer trimestre en producción.
- Plan de salida documentado. Existe una forma concreta de volver al proceso anterior, o a una alternativa, si el sistema deja de funcionar como se esperaba o si cambian las condiciones del proveedor.
Fase 3 — Ya en producción: seguimiento continuo
- Revisión periódica de la métrica de negocio. El indicador que de verdad importa —margen, capacidad, tiempo de ciclo, conversión— se revisa con la periodicidad acordada, no solo la disponibilidad técnica del sistema.
- Vigilancia de deriva. Se comprueba de forma periódica si la calidad de las respuestas se mantiene cuando cambian los datos de entrada, el propio proceso de negocio o el volumen de casos.
- Auditoría de casos límite y de posibles sesgos. Se revisan los resultados por segmento o tipo de caso, no solo el promedio general, para detectar si el sistema funciona peor en algún grupo concreto de clientes o de operaciones.
- Coste real frente al presupuestado. El gasto de operación, soporte y licencias del periodo se compara con lo presupuestado al decidir escalar, no solo con el coste inicial estimado durante el piloto.
- Canal de aviso ante desviaciones. Existe una forma sencilla para que cualquier persona del equipo señale que el sistema empieza a fallar más de lo esperado, y alguien concreto revisa esos avisos con regularidad.
Ocho señales de que el ROI es ficticio
Estas son las formas más habituales de maquillar, sin mala intención casi siempre, un retorno que en realidad no está demostrado:
- El ahorro se calcula en minutos teóricos, no en capacidad realmente liberada para otras tareas.
- El aumento de revisión humana compensa buena parte del tiempo que la IA dice ahorrar, pero nadie lo resta del cálculo.
- El cálculo de coste excluye integración, soporte o formación del equipo.
- Se decide escalar «porque ya se ha invertido mucho», no porque los indicadores lo respalden.
- La calidad se reporta solo como media general, sin desglose por tipo de caso crítico.
- No existe línea base, o se construyó después del piloto con datos parciales y sesgados.
- El coste por token o por consulta sustituye al coste por resultado válido en los informes.
- Nadie en el equipo puede explicar con claridad qué pasaría si se retirase la herramienta mañana mismo.
Si dos o más de estas señales aparecen en un proyecto que ya está en producción, lo prudente no es apagar el sistema de golpe, sino volver a la fase 2 de este checklist y reconstruir el cálculo con datos reales antes de seguir invirtiendo en ampliarlo.
Un ejemplo aplicado
Imaginemos, a modo de ejemplo ilustrativo y no de un caso real, una pyme de servicios que recibe habitualmente consultas repetitivas por correo y chat. En la fase 0, el propietario del proceso fija el problema: reducir el tiempo de primera respuesta sin que baje la satisfacción del cliente. La línea base registra volumen, tiempo medio de respuesta y reclamaciones antes de tocar nada del proceso actual. Si prefieres el caso resuelto paso a paso, con el mismo enfoque desarrollado en detalle, lo tienes ahí.
En la fase 1, un chatbot de atención al cliente se prueba primero en sombra sobre conversaciones reales, proponiendo respuestas sin llegar a enviarlas. El equipo corrige lo que no le convence y anota por qué. Solo cuando la calidad de esas propuestas supera el umbral fijado de antemano, el chatbot pasa a responder de forma asistida y, más adelante, de forma autónoma en las consultas de menor riesgo.
En la fase 2, antes de dar la herramienta a todo el equipo, se comprueba el coste por consulta resuelta sin intervención humana —no solo el coste de la licencia— y se revisa si las reclamaciones han bajado de verdad o simplemente se han desplazado a otro canal de contacto. Si el resultado no supera a la alternativa considerada en la fase 0 —por ejemplo, ampliar el horario del equipo humano—, la decisión correcta es no escalar, o escalar solo a una parte del volumen mientras se ajusta el sistema.
Este checklist funciona igual de bien si el proceso candidato es intensivo en documentos (facturas, contratos, expedientes) y el punto de partida razonable es el procesamiento inteligente de documentos, o si se trata de tareas repetitivas de back office donde conviene empezar por automatizar tareas repetitivas. En Summum IA lo usamos como guía de trabajo en los proyectos que acompañamos; si quieres repasarlo aplicado a tu proceso concreto, podemos hacerlo juntos.
Preguntas frecuentes
¿Este checklist sirve para cualquier proyecto de IA en una pyme?
Sí. Está pensado para repasarse en cualquier proyecto, sea un chatbot de atención al cliente, un sistema de procesamiento de documentos o una automatización de procesos, porque las preguntas son sobre el proceso de negocio y la medición, no sobre la tecnología concreta que se use.
¿En qué se diferencia de vuestro artículo sobre cómo medir el ROI de la IA en una pyme?
Ese artículo explica cómo se calcula el retorno paso a paso. Este checklist da por hecho ese cálculo y se centra en qué comprobar antes de aprobar el proyecto, durante el piloto y antes de escalarlo, para no llegar al final sin datos suficientes para decidir.
¿Cuándo está un piloto de IA listo para escalar?
Cuando supera los umbrales de calidad y riesgo fijados de antemano en los casos críticos, el coste por resultado válido compensa la alternativa considerada al principio, y hay presupuesto y persona responsable asignados para mantenerlo una vez pase a producción. No basta con que el equipo esté convencido de que funciona.
¿Qué hacer si el proyecto ya está en producción y no se siguió este checklist desde el inicio?
Revisar el bloque de señales de que el ROI es ficticio: si aparecen dos o más, lo recomendable no es apagar el sistema de golpe, sino volver a la fase de decisión de este checklist y reconstruir el cálculo con datos reales antes de seguir invirtiendo en ampliarlo.
Para seguir leyendo
Este checklist se apoya en la metodología de cálculo de retorno que desarrollamos en nuestro artículo sobre cómo medir el ROI de la IA en una pyme, y en la experiencia propia de Summum IA acompañando proyectos de automatización, chatbots y procesamiento de documentos en pymes.