
Cambiaste el programa de gestión del desempeño y después mejoraron los resultados del trabajo.¿Cómo saber si el cambio contribuyó a esa mejora?Un caso con dos equipos te ayuda a comparar lo ocurrido, revisar otras explicaciones y decidir qué información necesitas antes de extender el programa.
Formula una intervención y un resultado esperable
Evaluar un programa de gestión del desempeño empieza por una pregunta acotada: ¿qué cambió en el trabajo y qué permitiría vincular ese cambio con una práctica del programa? El cierre de formularios informa sobre la operación del ciclo. Para saber si el cambio contribuyó a mejorar el trabajo necesitas examinar resultados, exposición y explicaciones alternativas.
Imagina un equipo que incorpora una pauta de devolución para aclarar los criterios de entrega. La hipótesis es que los acuerdos ayudarán a reducir devoluciones por requisitos omitidos. Esa relación todavía debe comprobarse: quizá cambiaron los encargos, el equipo recibió más apoyo o el criterio de revisión se volvió menos exigente.
Escribe la intervención como una acción observable: quién aplicará la pauta, desde cuándo, en qué tareas y con qué apoyo. Si aún falta delimitar la práctica, el diseño del programa de gestión del desempeño ayuda a identificar entradas, responsables y decisiones. Aquí evaluaremos un cambio acotado dentro de ese programa.
Luego separa la aplicación del cambio y su resultado. Registrar que se realizaron conversaciones permite saber si la intervención llegó al equipo; revisar entregas devueltas permite observar un aspecto del trabajo. La conexión entre competencias, feedback y desarrollo sirve para precisar qué acuerdo debería traducirse en una práctica observable.
Deja una hipótesis que pueda revisarse
En este ejemplo ficticio: "Si los responsables aclaran los requisitos durante la devolución y comprueban el siguiente acuerdo, esperamos menos entregas devueltas por omisiones del criterio acordado". Anota también qué hallazgo pondría en duda la explicación, como una mejora que comenzó antes de introducir la pauta.
Define la línea base antes de intervenir
La línea base describe el resultado antes del cambio con una definición que puedas volver a aplicar. Define qué cuenta como devolución, cuál es la unidad, qué entregas son elegibles, qué período revisarás y de dónde obtendrás los registros. Conserva numerador y denominador: veinte devoluciones dicen poco sin saber cuántas entregas hubo.
Acuerda las reglas con quienes conocen el trabajo antes de mirar si favorecen la conclusión. Para el caso, cada entrega se cuenta una sola vez y se clasifica según si tuvo o no una devolución por requisitos omitidos. Un segundo envío del mismo expediente no crea otra entrega elegible. Si modificas la clasificación, documenta el cambio y revisa qué períodos siguen siendo comparables.
Las reglas del formato de evaluación permiten documentar indicador, evidencia y tratamiento de faltantes. Usarlas como registro no convierte una nota individual en una medida del efecto del programa: el resultado de esta evaluación es la tasa de devoluciones del proceso.
Revisa períodos anteriores si están disponibles. Un único corte previo no muestra si ambos equipos ya venían mejorando a ritmos distintos. Registra también volumen, tipo de encargos, dotación, apoyos y estacionalidad. Si esos antecedentes faltan, consérvalos como límite de la interpretación.
Ficha de diseño para completar dentro del equipo
| Campo | Qué dejar acordado |
|---|---|
| Intervención e hipótesis | Qué práctica cambia y por qué podría afectar el resultado. |
| Resultado y unidad | Entregas con devolución por el motivo definido, sobre entregas elegibles. |
| Línea base y comparación | Ventanas, fuente de registros y equipo o fase que permitirá contrastar. |
| Exposición | Quién recibió el cambio, cuándo y qué parte pudo aplicar. |
| Contexto | Cambios de tareas, recursos y reglas que podrían explicar el resultado. |
| Cálculo y límite | Operación prevista, datos faltantes y conclusiones que el diseño no permite. |
| Decisión | Quién revisará, en qué fecha y con qué criterio decidirá continuar o ajustar. |
Esta ficha es una propuesta editorial para ordenar la evaluación. Complétala en tu registro habitual y acuerda su pertinencia con el equipo; no es un instrumento validado.
Busca una comparación y registra exposición real
Una comparación ayuda a preguntar qué podría haber ocurrido sin la intervención. Busca un equipo, una fase o un despliegue que aporte información pertinente y cuyo contexto puedas examinar. Compartir un nombre de cargo no vuelve equivalentes a dos grupos. Revisa tareas, criterios, tendencias previas y condiciones antes de usar uno como referencia del otro.
El anexo analítico del Magenta Book de HM Treasury, en su apartado A2.7, explica la comparación de cambios entre grupos y la importancia del supuesto de tendencias paralelas sin intervención. La resta aritmética puede hacerse con pocos datos; interpretarla como efecto exige justificar el diseño y sus supuestos.
Registra la exposición real: quién recibió la pauta, cuándo se utilizó y qué apoyos estuvieron disponibles. Un grupo asignado al piloto puede aplicarla parcialmente. También puede haber intercambio de materiales con el grupo de comparación. Conserva ambas circunstancias al revisar qué se está contrastando.
Si el resultado se observa mediante una simulación, revisa las condiciones de una prueba de trabajo: instrucciones, herramientas e interrupciones pueden cambiar la interpretación. Mantén separada esa evidencia de la obtenida en tareas reales.
Calcula el ejemplo y limita la conclusión
EP01 es un caso ficticio con dos grupos no aleatorizados. Se aplicó el mismo criterio de devolución y se pactaron ventanas comparables. A recibió la intervención; B sirve como comparación. Cada celda recoge entregas con devolución sobre cien entregas elegibles, no personas evaluadas.
| Grupo | Antes | Después | Cambio |
|---|---|---|---|
| A · Intervención | 20 de 100 · 20 % | 12 de 100 · 12 % | −8 puntos porcentuales |
| B · Comparación | 18 de 100 · 18 % | 14 de 100 · 14 % | −4 puntos porcentuales |
En A, el cambio es 12 % − 20 % = −8 puntos porcentuales. En B, es 14 % − 18 % = −4 puntos porcentuales. La diferencia entre los cambios es (12 − 20) − (14 − 18) = −4 puntos porcentuales. A mostró una reducción cuatro puntos porcentuales mayor que B durante las ventanas observadas.
La descripción es favorable al grupo A, pero el caso incluye tres límites: A cambió además la mezcla de encargos, la exposición fue parcial y no se comprobaron las tendencias previas. No sabemos cuánto de la diferencia corresponde a la intervención. No corresponde convertirla en ahorro atribuible, ROI ni nota de una persona.
La siguiente comprobación es recuperar los registros del tipo de encargo y la exposición, y examinar los períodos previos disponibles. Si esos datos no permiten una comparación defendible, informa la señal descriptiva y mejora el diseño del siguiente ciclo. El resultado sigue siendo informativo si explicas con precisión hasta dónde permite llegar.
Decide si continuar, modificar o investigar
Antes de decidir, distingue qué necesitas sostener: mantener un piloto, cambiar su aplicación o extenderlo a otros equipos. Cada decisión requiere valorar la evidencia y el costo de equivocarte. Una señal puede justificar seguir observando un piloto acotado. Para extenderlo a toda la organización y atribuirle una mejora, hace falta evidencia que sostenga esa decisión. Define los criterios de revisión antes de conocer el resultado.
El ensayo de campo de CIPD sobre conversaciones basadas en fortalezas, publicado en 2017, estudió intervenciones en organismos públicos británicos. Distinguió un taller puntual de una intervención más amplia con apoyos y cambios de política. Es un ejemplo de evaluación situada: sus resultados no acreditan eficacia universal ni efectos de Ralun.
| Lo observado | Decisión que conviene preparar |
|---|---|
| La práctica apenas se aplicó. | Investigar la implementación antes de juzgar la hipótesis de resultado. |
| Mejoró el resultado y también cambió el contexto. | Examinar explicaciones alternativas; EP01 queda en esta situación. |
| El resultado no cambió pese a exposición comprobada. | Revisar medida, plazo, apoyos y mecanismo antes de concluir que nada puede funcionar. |
| Hay evidencia consistente con el diseño y sus supuestos. | Valorar continuidad o ampliación con sus límites, costos y seguimiento. |
El análisis de brechas de competencias ayuda a separar evidencia ausente, discrepancia y requisito observado cuando revisas un caso individual. Mantén esa revisión separada de la evaluación del programa: una dificultad de implementación no basta para calificar a sus participantes.
Comprueba qué datos puede aportar el proceso
Antes de pedir un informe, identifica las fuentes necesarias: registro de aplicación, resultado de trabajo, denominadores y cambios de contexto. Comprueba quién las conserva y cómo se relacionan. Una nota de desempeño y una devolución operativa pueden responder preguntas distintas aunque pertenezcan al mismo período.
La oferta pública de Ralun describe la consolidación de objetivos y competencias, la aplicación de ponderaciones y la revisión humana del resultado. Esos antecedentes pueden formar parte de tu proceso de desempeño. No se debe suponer que incluyan los datos operativos del ejemplo ni una evaluación causal del programa.
Para revisar la evidencia disponible de tu proceso en una demo, lleva la estructura anonimizada de un registro. Pide comprobar qué entrada está disponible, qué salida se puede obtener y qué análisis debe realizar tu equipo. Confirma los faltantes antes de comprometer una conclusión.
Preguntas frecuentes
¿Basta comparar el antes y el después?
Permite describir un cambio, pero por sí solo no separa la intervención de otros factores. Revisa contexto, tendencias y una comparación pertinente antes de atribuir un efecto.
¿Qué hago si no tengo otro grupo?
Conserva los registros previos, documenta la aplicación y busca explicaciones alternativas. Un especialista puede ayudar a valorar un diseño viable. Mientras tanto, informa lo observado con sus límites; no fabriques un grupo de control ni una certeza que los datos no permiten.
¿Una encuesta favorable demuestra mejora del trabajo?
Describe la experiencia declarada bajo sus condiciones de respuesta. Si buscas una mejora de calidad, necesitas una medida de ese resultado. La percepción puede aportar contexto sin reemplazarla.
Conclusión
Evaluar el programa significa vincular un cambio definido con resultados observables y una comparación defendible. EP01 permite calcular una diferencia favorable de cuatro puntos porcentuales, pero mantiene abierta su explicación. Una conclusión útil deja claro qué se observó, qué sigue sin resolverse y quién revisará la evidencia antes de decidir.
Te dejo un desafío
Esta semana, elige una mejora que tu equipo atribuya al último ciclo. Pide el registro original y escribe una explicación alternativa que también encaje con los datos. Identifica qué evidencia permitiría distinguirlas; te ayudará a formular la próxima comprobación.
