
Una misma evidencia de desempeño puede recibir valoraciones distintas en dos momentos.Antes de atribuir el cambio a quien evalúa, conviene revisar si también cambiaron el criterio o las condiciones.Aquí encontrarás una pauta para comparar referencias y conservar las razones de cada juicio.
Define qué debe mantenerse comparable
Imagina que una jefatura debe valorar si una persona comunica a tiempo los bloqueos de una entrega. Para comparar su interpretación en dos rondas, prepara una referencia que contenga el mismo registro, la misma descripción de criterio y la misma escala. Anota la versión y la fecha de vigencia de cada elemento. Si la valoración cambia, hay una pregunta que investigar; el cambio por sí solo no explica la causa.
Distingue tres cambios posibles: una nueva versión del criterio puede exigir otra conducta; el trabajo de una persona puede haber cambiado; y quien evalúa puede haber interpretado de otra forma una referencia equivalente. Si los tres cambian a la vez, no puedes atribuir la diferencia únicamente a la aplicación del criterio. El diccionario de competencias ayuda a revisar las conductas y niveles; el formato de evaluación desarrolla la necesidad de acordar escala y reglas.
La guía de ETS sobre calificación de respuestas construidas describe la comparación de respuestas previamente calificadas con nuevas valoraciones para observar cambios en el tiempo. Se refiere a pruebas educativas, no a una validación del procedimiento laboral que sigue. Sus umbrales y ajustes no se trasladan automáticamente a una evaluación de desempeño. Consulta la sección 4.7.3.2 de ETS.
Prepara referencias y rondas sin inducir recuerdo
Con especialistas que conocen el trabajo, selecciona referencias que cubran situaciones relevantes y asegúrate de que pueden utilizarse con los permisos y resguardos correspondientes. Usa casos ficticios o protegidos cuando no sea apropiado compartir registros reales. Una referencia didáctica no se convierte en verdad de terreno solo porque esté bien redactada.
Registra la versión del caso, el criterio, las instrucciones, la fecha y las condiciones de cada ronda. Diseña oportunidades independientes: evita mostrar la valoración anterior antes de recoger la nueva y acuerda cómo reducir la familiaridad con los casos. No des por hecha la independencia: registra si la persona recuerda el caso o su respuesta para interpretar el resultado. La carga de trabajo de evaluadores 360 ofrece una tarea complementaria: comprobar si el tiempo disponible permite revisar los antecedentes con atención.
No hay un intervalo universal que garantice olvido o independencia. Un resumen de investigación de ETS sobre ensayos GRE examinó la relación entre intervalos de calificación y desempeño; ese contexto educativo no determina la frecuencia adecuada de una comprobación laboral. El intervalo debe decidirse según el proceso, las referencias, los riesgos de recuerdo y el apoyo especializado disponible.
Conserva juicio original y explicación en cada ronda
Antes de discutir las respuestas, conserva la categoría escogida y una razón vinculada a la evidencia. Registra después cualquier aclaración o corrección como un evento nuevo, sin sobrescribir el juicio original. Si alguien cambia de opinión al conocer un antecedente que antes faltaba, identifica ese cambio de información: ya no estás comparando exactamente las mismas entradas.
La evaluación por competencias distingue criterio, escala y evidencia. En una escala ordinal puedes describir que una respuesta pasó de una categoría a otra. No supongas que la distancia entre dos categorías consecutivas es igual en toda la escala ni calcules promedios de letras como si fueran unidades equivalentes.
| Campo | Qué registrar |
|---|---|
| Referencia y versión | Identificador, fuente autorizada y versión de la evidencia. |
| Criterio y escala | Texto y versión que recibió la persona evaluadora. |
| Ronda y condiciones | Fecha, instrucciones, contexto y señales de familiaridad. |
| Juicio original | Categoría elegida antes de la discusión. |
| Razón | Fragmento de evidencia y regla que explican la elección. |
| Revisión posterior | Aclaración, responsable, fecha y motivo, conservando el original. |
Resuelve tres referencias repetidas con cambios
El siguiente ejemplo es ficticio. Una especialista de RR. HH. prepara tres referencias de un mismo criterio y una jefatura las valora en dos rondas. En este ejercicio la evidencia y la versión del criterio se mantienen iguales; todavía habría que diseñar y comprobar la independencia real entre rondas. El criterio ficticio pide comunicar un bloqueo al responsable antes del plazo acordado, con el siguiente paso identificado. "Requiere apoyo" describe una comunicación incompleta; "cumple", un aviso oportuno con siguiente paso; "supera", además de eso, un seguimiento documentado hasta obtener respuesta. Estas categorías son descripciones ordenadas, no números.
| Referencia | Primera ronda | Segunda ronda | Lectura inicial |
|---|---|---|---|
| DE01: avisó antes del plazo y señaló el siguiente paso; el registro no confirma seguimiento. | Requiere apoyo | Cumple | Cambió una categoría; contrastar si el aviso bastaba para cumplir. |
| DE02: avisó y registró dos seguimientos hasta recibir respuesta. | Cumple | Supera | Cambió una categoría; revisar cómo se interpretó el seguimiento. |
| DE03: avisó antes del plazo y señaló el siguiente paso; no hay seguimiento registrado. | Cumple | Cumple | Coincide; no se descarta recuerdo. |
Hay dos cambios y una coincidencia entre tres referencias. Es una señal para revisar las razones de cada juicio; no es una prueba estadística de deriva ni permite concluir que dos tercios de las evaluaciones laborales sean erróneas. Tampoco autoriza cambiar retrospectivamente las notas de personas.
Para DE01, compara qué fragmento del registro sustentó cada respuesta y si la jefatura aplicó la misma descripción de "cumple". En DE02 pregunta por qué la primera valoración no consideró los seguimientos documentados y si ambas rondas usaron la misma descripción de "supera". En DE03 una coincidencia tampoco demuestra estabilidad: podría deberse al recuerdo de la respuesta anterior. Estas preguntas son pasos de investigación, no explicaciones ya demostradas.
Revisa causas y decide qué volver a comprobar
Reúne los registros sin mostrar primero una respuesta como la correcta. La persona evaluadora explica su razonamiento y RR. HH. contrasta la versión, la evidencia entregada, las instrucciones y las condiciones de ambas rondas. Si hubo un cambio de escala o se omitió un antecedente, documenta la diferencia y corrige el diseño antes de interpretar la comparación como estabilidad del juicio.
Si el material fue equivalente y las razones apuntan a interpretaciones distintas, acuerda qué ambigüedad del criterio conviene examinar y qué referencia adicional podría ayudar. Un especialista debe revisar si el tamaño, la selección y el diseño permiten una conclusión más amplia. No basta repetir el mismo ejemplo hasta obtener coincidencia.
La investigación de Borba y colaboradores estudió equivalencia de medición en valoraciones laborales de una empresa sudamericana, con un análisis longitudinal de evaluadores durante sus primeros ciclos. Su diseño y sus resultados no validan esta pauta de tres referencias ni prueban que toda diferencia sea deriva. La referencia muestra por qué importa examinar la comparabilidad de una medición a lo largo del tiempo. Lee el estudio.
Para conversar sobre una valoración real, distingue el hecho observado de la interpretación y de lo que aún falta comprobar. La guía de retroalimentación laboral ayuda a preparar esa conversación sin convertir una discrepancia en una acusación.
Prueba recuperación de versiones y valoraciones
El resultado útil de esta comprobación es una cadena que otra persona autorizada pueda seguir: referencia, versión del criterio, condiciones, juicio original, razón y decisión posterior. Antes de cerrar, pide recuperar una valoración antigua con su versión y explicar qué cambió. Si el sistema o los archivos no permiten hacerlo, registra esa limitación y asigna quién la resolverá.
La gestión del desempeño durante el trabajo sitúa esta revisión dentro de un ciclo con responsables y decisiones. Para explorar una tarea concreta en Ralun, lleva una referencia anonimizada y pregunta cómo se conservan y recuperan los antecedentes en la configuración que consideras. Verifica el recorrido en una demo; no presupongas un banco de anclajes, diagnóstico psicométrico ni recalificación automática.
Preguntas frecuentes
¿Una media distinta entre dos ciclos prueba deriva?
No. Puede reflejar cambios en el trabajo, la población, los criterios, las condiciones o la forma de valorar. Necesitas evidencia comparable y un diseño que permita examinar explicaciones alternativas.
¿Basta con tres referencias?
Tres referencias permiten ensayar el registro y detectar preguntas. No sostienen por sí solas una conclusión general sobre un proceso o una persona. El alcance de una comprobación mayor requiere diseño y revisión especializada.
¿Qué hago si cambió la versión del criterio?
Conserva ambas versiones, su vigencia y la razón del cambio. Describe qué se comparó y evita tratar como equivalente una exigencia distinta. Repite la comprobación con entradas comparables cuando tenga sentido.
Conclusión
Comprobar la aplicación de un criterio exige conservar lo que se valoró, la regla utilizada y la explicación de cada juicio. Dos cambios en tres referencias son una invitación a investigar, no una tasa de error. El valor está en poder distinguir una diferencia de criterio de un cambio en el trabajo, la evidencia o las condiciones antes de decidir qué corregir.
Te dejo un desafío
Esta semana, elige un criterio de tu evaluación y una referencia ficticia que lo ilustre. Pide a una persona que registre su valoración y explique qué parte de la evidencia utilizó. Guarda el criterio y su versión: tendrás un punto de partida para revisar después qué permaneció comparable.
