Saltar a contenido

Cómo medimos si funciona

En resumen

  • Sin medir el punto de partida antes de empezar, es imposible demostrar lo que aporta la IA.
  • Medimos tres cosas: si se usa, si aporta (tiempo, calidad, resultados) y si se usa con control.
  • Los objetivos se fijan antes de empezar, no cuando ya se ven los resultados.

Por qué es la parte que más se descuida

Usar IA es fácil; demostrar que aporta valor, no tanto. Según el informe The State of AI in 2025 de McKinsey (noviembre de 2025), el 88 % de las organizaciones encuestadas ya usa IA en al menos una función. Sin embargo, solo el 39 % declara algún impacto en su resultado operativo (EBIT), y en la mayoría de los casos ese impacto es inferior al 5 %.

La diferencia entre las empresas que obtienen valor y las que no rara vez está en la herramienta: está en elegir bien dónde aplicarla y medir con rigor.

Medir bien sirve para tres cosas:

  • Decidir con datos si un piloto sigue, se ajusta o se para.
  • Justificar inversiones, como licencias o ampliaciones, ante la dirección.
  • Evitar sesgos: quien promueve un piloto tiende a ver éxito y quien desconfía tiende a ver fracaso.

Las tres familias de indicadores

1. Uso: ¿se está usando?

Un piloto técnicamente brillante que nadie usa es un fracaso.

Indicador Cómo se mide
Uso activo % de personas con acceso que lo usan al menos una vez por semana
Continuidad ¿Siguen usándolo al cabo de un mes, o lo abandonan tras probarlo?
Cobertura del proceso % de las tareas del alcance que se hacen ya con apoyo de IA

2. Valor: ¿aporta?

Tipo de valor Ejemplos de indicador
Tiempo recuperado Horas por semana dedicadas a la tarea, antes y después
Calidad Errores o correcciones por cada 100 documentos; retrabajo; valoración del responsable del área
Velocidad Tiempo de respuesta a un cliente; tiempo de preparación de una oferta
Resultado de negocio Ofertas enviadas, conversión, contenidos publicados… cuando se pueda atribuir razonablemente

Tiempo y calidad, siempre juntos

Hacer algo el doble de rápido no es una mejora si se duplican los errores. Medid siempre al menos un indicador de tiempo y uno de calidad.

3. Control: ¿se usa con control?

Indicador Señal de alerta
Resultados revisados por una persona Por debajo de lo que exige el diseño del piloto
Incidencias (errores relevantes, datos donde no debían estar) Cualquier incidencia grave
Usos fuera de la política Cualquiera

Cómo hacerlo sin burocracia

  1. Antes de empezar, medid el punto de partida durante una o dos semanas. Por ejemplo, cuántas horas cuesta hoy la tarea. Una estimación honesta del responsable del área es mejor que nada, pero el dato real es mucho mejor.
  2. Fijad el objetivo y el umbral a partir del cual se considera que funciona. Ejemplo: "reducir de 6 a 3 horas semanales sin aumentar las correcciones".
  3. Durante el piloto, llevad un registro semanal breve: uso, tiempo, incidencias y, sobre todo, aprendizajes (qué funciona, qué no y qué sorprende). Cinco minutos por semana bastan.
  4. Cada mes, el comité revisa los indicadores frente al objetivo y decide si hay que ajustar algo.
  5. Al cierre, un análisis cuantitativo (¿se ha alcanzado el objetivo?) y cualitativo (¿qué hemos aprendido? ¿qué habría que cambiar antes de ampliar?).

El retorno, en una línea

Para decidir si merece la pena ampliar un piloto, basta una cuenta sencilla:

Valor anual estimado = horas recuperadas al mes × coste por hora × 12 (más mejoras de calidad o de ingresos, si se pueden cuantificar)

Coste anual = licencias + tiempo de implantación y formación + tiempo de supervisión

Calculadlo sobre 12 meses, no solo sobre el periodo de piloto: la fase piloto incluye costes de aprendizaje que no se repiten.

Errores frecuentes

  • Medir lo fácil en vez de lo importante. El número de consultas a una herramienta no dice nada; las horas recuperadas, sí.
  • No medir el punto de partida. Sin el "antes", el "después" no demuestra nada.
  • Mover la portería. Fijar o cambiar el umbral de éxito después de ver los resultados invalida la evaluación.
  • Olvidar la calidad. Más rápido no significa mejor.
  • Ignorar lo cualitativo. Muchas veces el mayor valor de un piloto está en lo que se aprende sobre el proceso.

Qué se espera del comité

  • ¿Cada piloto tiene punto de partida medido y objetivo fijado antes de empezar?
  • ¿Hay al menos un indicador de tiempo y uno de calidad?
  • ¿Revisamos los indicadores todos los meses, con el mismo formato?
  • ¿Se recogen los aprendizajes, no solo los números?
  • ¿Las decisiones de ampliar o licenciar más se justifican con estos datos?

Fuentes