Saltar al contenido
Aura AI LabsIntelligence

Métricas que mienten: cómo un buen KPI destruye el criterio.

Ninguna métrica sobrevive intacta a su conversión en meta. Lo que se rompe primero no es el número: es el juicio de la gente que lo persigue.

Renata Solís16 min de lectura

Última actualización:

El indicador de servicio de la cadena minorista brillaba: noventa y tantos por ciento de pedidos entregados completos y a tiempo, trimestre tras trimestre, mejor que nunca. En el mismo período, las quejas de tiendas subían y el inventario en los estantes equivocados también. La contradicción tenía una explicación que nadie quería escribir: los centros de distribución habían aprendido a partir pedidos grandes en varios pequeños —cada fragmento entregado completo cuenta como éxito— y a negociar fechas de compromiso holgadas que luego batían con puntualidad heroica. El indicador no medía ya el servicio. Medía la habilidad de la red para producir el indicador.

El fenómeno tiene nombre de ley desde hace medio siglo: cuando una medida se convierte en meta, deja de ser buena medida. Se cita mucho y se gobierna poco, porque la versión citada suena a curiosidad académica y la versión real es un proceso corrosivo, gradual y perfectamente racional desde dentro. Nadie hizo trampa en esa cadena minorista. Cada quien optimizó, con inteligencia y esfuerzo, exactamente lo que la organización le pidió optimizar. Ese es el punto: las métricas no mienten porque la gente sea deshonesta; mienten porque la gente es obediente.

Esta pieza de la serie Criterio Ejecutivo disecciona el ciclo de vida por el que un indicador honesto se vuelve mentiroso, y las disciplinas —pocas, contraintuitivas— que lo mantienen diciendo la verdad. Importa aquí más que en ningún otro texto de la serie una advertencia previa: el remedio no es medir menos. Una organización sin métricas no recupera el criterio; lo sustituye por anécdota y jerarquía, que son peores. El remedio es entender qué les pasa a los números cuando se les cuelga dinero y diseñar para eso.

El ciclo de vida: de proxy a teatro

Todo indicador nace como proxy: una aproximación medible de algo que importa y no se deja medir directo. Nadie puede medir «servicio al cliente» como se mide temperatura; se elige un sustituto razonable —pedidos completos y a tiempo— y durante su primera época el proxy funciona, porque la gente lo trata como lo que es: un termómetro. La degradación empieza el día que el termómetro entra al bono, a la evaluación o al semáforo del consejo. A partir de ahí, la energía de la organización se redistribuye silenciosamente: del resultado real hacia el instrumento que lo representa.

La redistribución avanza en tres etapas reconocibles. Optimización legítima: se mejora el resultado real y el número lo refleja; la etapa feliz, que convence a todos de que la meta funciona. Optimización del borde: se descubren las zonas donde el número y la realidad divergen —partir pedidos, renegociar fechas— y se explotan sin violar ninguna regla escrita. Teatro puro: la producción del número se independiza del resultado; la organización desarrolla procesos, roles y hasta sistemas cuya única función es que el indicador luzca. Lo notable es que las tres etapas emplean el mismo talento y la misma dedicación. Desde adentro, ninguna se siente distinta.

El tránsito entre etapas no lo impulsa la malicia sino la presión sin válvula: cuando la meta sube cada año y la mejora real se agota, el borde es el único territorio disponible. Por eso las organizaciones más exigentes con sus números suelen tener los números menos confiables — han empujado a su gente más adentro de la etapa dos y tres. La exigencia sin auditoría del significado no produce desempeño; produce ficción disciplinada.

Las métricas no mienten porque la gente sea deshonesta. Mienten porque la gente es obediente.

El daño de fondo: la atrofia del criterio

El costo visible del indicador degradado es decisional: la dirección navega con instrumentos descalibrados, y las decisiones tomadas sobre números de teatro heredan la ficción. Pero hay un costo más hondo y más lento que conecta con el corazón de esta serie: la atrofia del juicio. Cuando el número manda sin apelación, la pregunta «¿qué es lo correcto aquí?» es sustituida en miles de micro-decisiones diarias por «¿qué mueve el indicador?». La gente no pierde el criterio de golpe; lo deja de usar, que a mediano plazo es lo mismo.

El caso extremo es conocido en cualquier operación: el empleado que hace lo absurdo —rechazar al cliente a las 8:59, partir el pedido, cerrar el ticket sin resolverlo— mientras mira a su interlocutor con complicidad resignada. Sabe que es absurdo. El sistema le paga por el absurdo y le cobraría el buen juicio. Multiplicado por toda la nómina y por años, ese arreglo produce la organización que esta serie viene describiendo por negativos: llena de gente capaz que dejó de ejercer criterio porque ningún indicador se lo reconoce y varios se lo penalizan.

Hay además un efecto de selección que casi nadie contabiliza: los perfiles con más criterio son los que peor toleran el teatro. Cuando la brecha entre el número y la realidad se vuelve parte del paisaje, esos perfiles se van primero — el mismo drenaje silencioso que registramos en la deuda de decisión. El tablero, mientras tanto, mejora. Es la propiedad más perversa del indicador degradado: mide con especial optimismo justo cuando la casa se vacía de quienes podían notarlo.

Síntomas de un tablero en etapa de teatro

SíntomaQué está pasando
El número mejora mientras las quejas cualitativas empeoranLa divergencia proxy-realidad ya es estructural; el borde se institucionalizó
Nadie puede explicar una mejora reciente en términos operativosLa mejora vive en la medición, no en la operación
Existen roles o procesos dedicados a preparar el indicadorTeatro con presupuesto: la ficción ya tiene nómina propia
Las definiciones del indicador se renegocian cada cierreLa meta se cumple en la letra chica, no en el terreno
La operación usa números distintos a los del reporte para decidirLa propia casa ya no se cree su tablero; mantiene dos contabilidades
Señales de que un indicador dejó de medir lo que dice medir.

La tabla se usa mejor como examen periódico que como reacción: una pasada semestral por los diez indicadores de más peso, síntoma por síntoma, con la participación de gente de terreno que no debe nada a esos números. Media mañana de trabajo, y el mapa de qué tan lejos está cada métrica de su realidad queda dibujado antes de que lo dibuje un cliente perdido.

El quinto síntoma merece subrayarse porque es el veredicto definitivo y el más común: la doble contabilidad informal. Cuando el gerente de distribución decide con su hoja de cálculo privada mientras reporta el indicador oficial, la organización ya sabe —en su conducta, que es donde se sabe de verdad— que su métrica miente. El hallazgo no es la hoja privada; es que nadie con autoridad haya preguntado por qué existe.

Las disciplinas que mantienen honestos a los números

La primera disciplina es de diseño: metas en pares tensionados. Todo indicador optimizable a costa de algo debe medirse junto a ese algo — velocidad con calidad, cobertura con costo, entregas a tiempo con quejas de receptor. El par no impide el juego, pero lo encarece: mover un número del par hundiendo el otro queda a la vista. Los tableros de una sola cifra reina producen organizaciones de un solo truco, y el truco siempre termina siendo el borde.

La segunda es de mantenimiento: la auditoría del significado, distinta de la auditoría del cálculo. No pregunta si el número está bien sumado sino si sigue midiendo lo que decía medir: se toma una muestra de casos que el indicador celebra y se les mira de cerca, en el terreno. ¿Estos pedidos «completos y a tiempo» dejaron a un cliente servido? La auditoría del significado en calendario fijo —anual por indicador crítico— es la contramedida directa a la etapa dos, y su hallazgo típico no es fraude sino deriva: el proxy envejeció mientras el negocio cambiaba.

  • Pares tensionados: ningún indicador con bono viaja solo; siempre con su contrapeso.
  • Auditoría del significado: muestra de éxitos del indicador revisada en terreno, con calendario.
  • Rotación del proxy: cuando un sustituto se degrada, se cambia de sustituto — el objetivo real es el que permanece.
  • Canal cualitativo protegido: la anécdota del terreno con ruta directa al órgano de dirección, sin pasar por los dueños del número.
  • Metas con memoria: quien fija la meta del año siguiente conoce el informe de bordes explotados del año anterior.

La tercera disciplina es la más incómoda porque toca el poder: separar la medición de la evaluación en los indicadores más críticos. Mientras el mismo número sirva para dirigir la operación y para pagar bonos, la presión de la segunda función corromperá a la primera; es la versión métrica del conflicto que ya vimos entre calidad de proceso y calidad de resultado. Algunas casas lo resuelven midiendo la operación con granularidad fina y pagando sobre agregados difíciles de teatralizar; otras, rotando los indicadores compensables. Ninguna solución es limpia. Todas superan al statu quo de pedirle al mismo número que diga la verdad y reparta el dinero.

La vida secreta de los promedios

Hay una mentira métrica que no necesita incentivos para operar: la agregación. El promedio es el gran anestésico del tablero ejecutivo — un indicador nacional de servicio en verde puede contener tres regiones en llamas compensadas por cinco tranquilas, y el formato mismo garantiza que la dirección se entere de las llamas por el periódico antes que por el reporte. No es manipulación de nadie: es la propiedad matemática de sumar cosas distintas, puesta al servicio de la comodidad de leer un solo número.

Las organizaciones operativas serias han aprendido a desconfiar del promedio con una regla de lectura: todo agregado en verde debe exhibir su peor segmento junto al promedio. El indicador nacional viaja acompañado de la peor región; la satisfacción global, del peor decil de clientes; la disponibilidad de flota, de la peor ruta. La regla cuesta una columna más en el tablero y compra la diferencia entre gestionar distribuciones —que es donde vive la realidad— y gestionar resúmenes, que es donde vive la sorpresa. El promedio informa; la cola decide si el trimestre que viene habrá crisis.

El agravante ejecutivo es que las colas malas suelen coincidir con los clientes, rutas o plantas que más cuesta perder — el deterioro empieza por donde la operación es más difícil, que suele ser donde el negocio es más valioso o más visible. El promedio, al mezclar, no solo esconde el problema: esconde específicamente el problema más caro. Preguntarle al tablero «¿quién está pagando este promedio?» es la versión distributiva de la pregunta que descalibra el teatro.

Metas heredadas: cuando nadie recuerda el porqué

El indicador degradado tiene un primo silencioso: el indicador huérfano, la métrica que se sigue produciendo y persiguiendo aunque nadie recuerde qué decisión alimentaba. Nació para una crisis que ya pasó, para un directivo que ya se fue, para un regulador que cambió de formato — y sobrevivió porque quitar una métrica exige una decisión mientras que mantenerla no exige nada. Con los años, el tablero acumula estas capas geológicas, y el costo no es solo la producción del número: es la atención directiva, que es finita, repartida entre señales vivas y fósiles con idéntica solemnidad.

La contramedida es la genealogía: toda métrica del tablero directivo debe poder responder tres preguntas — ¿qué decisión cambia según tu valor?, ¿quién la toma?, ¿cuándo fue la última vez que la cambió de verdad? La tercera es la letal. Un ejercicio anual de genealogía sobre el tablero típico jubila entre un cuarto y un tercio de sus indicadores sin pérdida alguna de gobierno, y el espacio liberado vale doble: menos ruido para la atención, y una lección cultural sobre la diferencia entre medir para decidir y medir por costumbre — la misma vara con que la anatomía juzga a los tableros: si ninguna decisión cambia por verlo, sobra.

Mantener una métrica no exige ninguna decisión; jubilarla sí. Por eso los tableros crecen como los sótanos: por default.

El costo de medirlo todo

La abundancia analítica creó una tentación nueva: como ya se puede medir casi todo, se mide casi todo, y la métrica pasó de recurso escaso a contaminante. El costo tiene tres capas. La visible es de producción: gente y sistemas dedicados a fabricar números que nadie convierte en decisión. La intermedia es de atención: cada indicador adicional diluye a los importantes, y la dirección que revisa noventa métricas gobierna estadísticamente peor que la que domina nueve. La profunda es de conducta: la gente operativa, que no puede optimizar noventa cosas, elige en la práctica un subconjunto — y lo elige por visibilidad política, no por importancia causal. El tablero inflado no solo confunde a quien lo lee; delega la estrategia real a la intuición de quien decide qué ignorar.

La disciplina de cartera aplica a las métricas igual que a las decisiones: un número máximo por nivel —pocos en dirección, algunos más por área—, entrada solo por sustitución, y el resto degradado a métricas de diagnóstico, disponibles para quien investiga pero ausentes del ritual de revisión. La resistencia a jubilar indicadores usa siempre el mismo argumento, «¿y si lo necesitamos?», que confunde archivar con destruir: los datos siguen ahí; lo que se retira es su derecho a reclamar atención mensual de la gente más cara de la casa.

Introducir una métrica nueva sin corromperla

Dado que toda métrica con consecuencias termina degradándose, el momento del diseño es la mejor oportunidad de retrasar el ciclo. Las casas que lo hacen bien siguen una liturgia de introducción que cabe en cinco reglas:

  1. Período de observación sin consecuencias: la métrica corre seis meses o un año sin bono ni semáforo, para conocer su comportamiento natural antes de que los incentivos lo distorsionen.
  2. Definición congelada por escrito, con dueño: qué cuenta, qué no, y quién autoriza cambios — la renegociación de definiciones en cada cierre es el síntoma cuatro de la tabla anterior.
  3. Par tensionado designado desde el nacimiento, no añadido tras el primer abuso.
  4. Fecha de primera auditoría de significado agendada antes del primer pago que dependa de ella.
  5. Cláusula de jubilación: qué condición retira la métrica del tablero — porque las métricas, como las decisiones, deben nacer con ventana.

La liturgia parece exceso para «solo un indicador» hasta que se recuerda qué es un indicador con consecuencias: un contrato de comportamiento con toda la gente a la que alcanza. Los contratos se redactan con cuidado precisamente porque serán interpretados con astucia. Ningún departamento jurídico firmaría con un tercero el equivalente de lo que las direcciones les firman a sus organizaciones cada enero: objetivos ambiguos, definiciones móviles y consecuencias grandes.

El tablero mínimo honesto

Nada de lo anterior exige un tablero grande; exige uno vigilado. La versión mínima para un órgano de dirección cabe en una página: por cada resultado que de verdad importa —tres o cuatro, no catorce—, el par tensionado de indicadores, la fecha de su última auditoría de significado, y una columna final que casi nadie incluye: qué está sacrificando la organización para producir estos números, según el canal cualitativo. Esa columna es el antídoto contra la lectura complaciente: obliga a la sala a recordar, cada mes, que el tablero es un mapa y el territorio anda afuera.

El caso especial de las métricas automatizadas

La degradación métrica adquiere una velocidad nueva cuando quien optimiza el número no es una persona sino un sistema. Los decisores automáticos que examinamos en la pieza sobre gobierno algorítmico son optimizadores literales: perseguirán el proxy con una eficiencia que ningún gerente astuto alcanza, y encontrarán los bordes de la definición más rápido de lo que cualquier auditoría los cierra. El sistema que maximiza «entregas a tiempo» descubrirá solo, sin malicia y sin pausa, que prometer fechas holgadas es el camino corto — la etapa dos del ciclo, ejecutada a velocidad de máquina.

La consecuencia práctica es que toda métrica que alimente a un optimizador automático necesita el tratamiento completo de esta pieza desde el día uno — par tensionado, auditoría de significado, definición congelada— no como madurez deseable sino como requisito de despliegue. Con humanos, la degradación da años de margen; con máquinas, da semanas. Y la doble contabilidad informal, que en el mundo humano es síntoma, en el automatizado es imposible: el sistema no tiene hoja de cálculo privada con la verdad. Si su métrica miente, todo lo que decide hereda la mentira sin el amortiguador del criterio de nadie.

Hay aquí una convergencia que resume la serie entera: el criterio ejecutivo sobre métricas y el gobierno de algoritmos son la misma disciplina a dos velocidades. Lo que el tablero le hace a la conducta humana en trimestres, se lo hace a la conducta automatizada en días. Las casas que aprendieron a mantener honestos sus números con personas tienen la mitad del camino andado para gobernarlos con máquinas; las que no, van a automatizar su teatro.

Un apunte sobre el tono con que se implanta todo esto, porque el tono decide el resultado. Si las auditorías de significado llegan como cacería —¿quién infló este número?— la organización aprenderá a esconder mejor, que es la etapa tres con más ingeniería. La implantación que funciona parte del diagnóstico correcto: la degradación es un fenómeno de sistema, no de personas, y las mismas personas que hoy producen teatro producirán verdad en cuanto la estructura deje de pagarles la ficción. La primera auditoría de significado debería terminar, idealmente, sin un solo culpable y con tres definiciones corregidas.

Existe finalmente la tentación opuesta al teatro: el nihilismo métrico. Directivos quemados por tableros mentirosos que deciden gobernar por instinto y conversación, sin números. Esa cura mata: sin métrica, el criterio pierde su banco de pruebas y la casa regresa al gobierno por anécdota, donde gana quien narra mejor, no quien opera mejor. El objetivo de esta pieza no es desconfiar de los números sino mantenerlos merecedores de confianza — que es trabajo permanente, como toda honestidad institucional.

Conviene cerrar donde empezamos, con la cadena minorista del indicador brillante. El desenlace real de casos así rara vez es un escándalo; es un martes cualquiera en que un cliente grande no renueva, la dirección pide explicaciones y el tablero no tiene ninguna, porque llevaba trimestres midiendo su propio reflejo. La organización descubre entonces que sus números eran un espejo y no una ventana — el mismo desenlace que anticipamos para los datos públicos que se publican para cumplir y no para decidir. Los números pueden ser ventanas. Lo son mientras alguien, con calendario y autoridad, se asome de vez en cuando por el otro lado a verificar que el paisaje sigue ahí.

CompartirLinkedInX

Referencias

  • Charles Goodhart y la formulación clásica sobre medidas convertidas en objetivos.
  • Jerry Muller, The Tyranny of Metrics: patologías de la fijación métrica en organizaciones.
  • Literatura sobre diseño de incentivos y multitasking en teoría de agencia.
Renata Solís

Dirección editorial · Estrategia de datos

Escribe sobre cómo las organizaciones mexicanas pasan de acumular datos a tomar decisiones. Le interesa la frontera entre política pública, operación y tecnología.

Señales de Aura

Recibe el próximo análisis antes que nadie.

Ideas, riesgos y oportunidades del futuro operativo de México. Sin ruido.