Ralun

Ralun / Guías de desempeño

Qué comprobar antes de comparar notas de desempeño obtenidas con escalas distintas

Isotipo oficial de RalunRalun · Lectura estimada: 8 min
CompartirLinkedInFacebook
Enlace

Selecciona el enlace y usa la opción Copiar de tu dispositivo.

Correo
Una profesional ficticia observa dos tiras de papel con marcas distintas; un trazo morado rodea una de ellas.

Una jefatura necesita revisar dos ciclos de evaluación que utilizaron escalas distintas. Llevar ambas notas al mismo rango no demuestra que signifiquen lo mismo. Aquí encontrarás qué antecedentes comparar y cuándo mantener los resultados separados o buscar apoyo especializado.

Identifica qué cambió entre instrumentos

La pregunta no empieza por el máximo de cada escala. Empieza por el uso que quieres dar a los resultados: ¿necesitas recuperar una evaluación anterior para una conversación, describir por separado dos ciclos o tratar sus notas como si fueran intercambiables? Cada propósito exige una justificación distinta.

Reúne las versiones completas de los instrumentos. Para cada una, registra qué se evaluó, qué tareas o conductas se incluyeron, qué significa cada categoría, quién evaluó, a qué población se aplicó, cuándo y bajo qué condiciones. Anota también qué decisión se pretendía apoyar. Si falta una descripción, consérvala como una laguna: el número no la reconstruye.

Un paso de tres a cinco categorías puede acompañarse de otras modificaciones: nuevos criterios, tareas añadidas, otra guía para evaluar o un cambio de población. No todos tienen el mismo efecto ni basta con descubrir uno para calcular una equivalencia. Esta revisión inicial organiza las preguntas que un estudio posterior tendría que resolver.

Para revisar el diseño de las categorías, la guía sobre cómo elegir una escala de evaluación del desempeño desarrolla la diferencia entre frecuencia, dominio y otras respuestas. Si necesitas recuperar la base de cada juicio, revisa también cómo registrar evidencias de desempeño con su fuente y período.

Distingue recodificación y equivalencia de significado

Recodificar consiste en expresar un valor con otra etiqueta o número bajo una regla. Puede servir para presentar un registro, siempre que se conserve su valor original y se explique la transformación. Eso no demuestra que dos categorías tengan el mismo significado ni que se puedan usar indistintamente en una decisión.

Una escala ordinal ordena categorías, pero su orden no asegura que la distancia entre categorías vecinas sea igual. El glosario de NIST sobre escala ordinal distingue el orden de la magnitud de las diferencias. Por eso, dividir una nota por su máximo puede producir una razón matemática sin convertirla en porcentaje de desempeño. Si el mínimo es distinto de cero, ese cociente tampoco representa por sí solo la posición dentro del rango.

En investigación sobre pruebas educativas, Neil Dorans examina los límites de comparar puntuaciones de pruebas distintas. En el ejemplo que analiza, tratar los resultados como comparables requeriría un enlace; incluso reunir datos para construirlo podría no producir una interpretación significativa. Esa discusión ayuda a formular preguntas, pero no valida una conversión entre instrumentos de desempeño laboral.

Define qué evidencia exige la comparación pretendida

Antes de combinar resultados, escribe una frase que indique qué quieres concluir, para quiénes y con qué consecuencias. Después elige el nivel de uso que los antecedentes permiten sostener:

La guía para analizar resultados con cobertura y límites desarrolla cómo preparar comparaciones una vez identificados el instrumento y la población. Aquí la decisión previa es si las versiones permiten la comparación concreta que se pretende.

Uso previstoQué conservaLímite inicial
Consultar el historialValor original, instrumento, fecha y descripción de cada versión.Ver dos notas juntas no demuestra que midan lo mismo.
Describir ciclos por separadoPoblación, condiciones y resultados de cada instrumento.Las diferencias observadas no identifican por sí solas una mejora o deterioro.
Tratar puntuaciones como intercambiablesNecesita una definición explícita de comparabilidad y evidencia apropiada para el uso.No se autoriza mediante una fórmula elegida solo porque produce números en el mismo rango.

Si la decisión requiere una equivalencia, consulta a especialistas en medición para determinar si es defendible, qué datos se necesitan y cuáles serán sus límites. Una relación útil para una población y una finalidad no se traslada automáticamente a otra. El informe de ETS sobre equiparación aborda ediciones de pruebas educativas y la importancia de que sus puntuaciones mantengan significado; no acredita esta aplicación laboral.

Resuelve dos valores que parecen equivalentes

Considera este ejemplo ficticio. Una responsable de RR. HH. revisa dos registros de instrumentos distintos. No hay un estudio que enlace sus puntuaciones.

RegistroValor y escalaDescripción disponible
ES013 en una escala de 1 a 5Cumple el requisito con apoyo en algunas situaciones.
ES026 en una escala de 1 a 10Logro parcial; el instrumento añadió nuevas tareas.

En ambos casos, dividir la nota por su máximo da 0,6. Esa coincidencia es aritmética: no significa que ambos registros representen un 60 % de desempeño ni que sus categorías sean equivalentes. Las descripciones difieren, el segundo instrumento incluye tareas nuevas y ninguno parte de cero. Tampoco sabemos, solo con estos datos, cuánto cambió el desempeño de una persona.

La salida responsable es conservar cada valor con su versión y descripción, explicar que no existe enlace y formular la comparación que se desea justificar. Si alguien necesita una decisión conjunta, la pregunta pasa a ser qué evidencia y diseño podrían sostenerla; la tabla anterior no es una tabla de conversión.

Decide estudio, separación o restricción de uso

Utiliza la siguiente pauta dentro del registro que ya ocupas. No es una plantilla de equiparación ni sustituye una revisión especializada.

PreguntaQué registrar antes de decidir
¿Para qué se compararán?Decisión, personas afectadas y nivel de consecuencia.
¿Qué versiones intervienen?Instrumento, fecha, escala, categorías y descripciones originales.
¿Qué cambió?Contenido, tareas, población, administración y condiciones conocidas.
¿Qué respaldo existe?Estudios aplicables, población, método, alcance y limitaciones; indicar si no hay ninguno.
¿Qué uso se permite ahora?Consulta histórica, descripción separada o comparación respaldada; responsable y fecha de revisión.
¿Qué queda restringido?Conclusiones o decisiones que no se pueden sostener con la evidencia disponible.

Si faltan antecedentes para la comparación pretendida, informa esa limitación antes de presentar una tendencia conjunta. Mantén los ciclos separados y recupera las descripciones originales. Si un estudio resulta necesario, define su alcance con especialistas; no hay un diseño universal que pueda elegirse a partir del número de categorías.

Una reunión de calibración de desempeño puede ayudar a contrastar cómo se aplica un mismo criterio y documentar desacuerdos. Por sí sola no convierte dos instrumentos diferentes en equivalentes. Si el problema es definir una medida para un resultado concreto, la guía de medición del desempeño laboral explica cómo fijar unidad, fuente y límites.

Prueba el historial sin borrar sus diferencias

Recupera una muestra de registros de cada versión y verifica si junto a la nota puedes identificar el instrumento, su fecha, la descripción de la categoría y las condiciones disponibles. Si falta alguno de estos datos, registra la ausencia y busca su fuente antes de interpretar la diferencia. Conservar un historial y demostrar equivalencia son tareas distintas.

Si quieres revisar este recorrido en Ralun, solicita una demo de una tarea con un ejemplo anonimizado. Lleva la entrada y la salida que necesitas recuperar y pregunta qué puede demostrarse en tu configuración. La conversación no equivale a un estudio de enlace ni garantiza una conversión válida.

Preguntas frecuentes sobre escalas de desempeño

¿Puedo comparar notas si ambas usan la misma cantidad de categorías?

No necesariamente. Revisa qué describen, qué contenido incluyen y bajo qué condiciones se aplicaron. El mismo número de opciones no demuestra equivalencia de significado.

¿Puedo mostrar juntas las notas anteriores y nuevas?

Puedes conservar y presentar el historial con sus versiones y límites claramente identificados. Antes de usar la proximidad visual para sugerir una tendencia, comprueba que la comparación esté justificada.

¿Qué hago si no hay un estudio de enlace?

Conserva y describe los resultados por separado para el uso que admitan. Si una decisión requiere tratar las notas como intercambiables, pide una revisión especializada de su viabilidad y de la evidencia necesaria.

Conclusión

Una escala nueva puede cambiar algo más que la forma de escribir una nota. Antes de comparar, identifica la decisión y reúne las versiones, descripciones, población y condiciones. Cuando la evidencia no sostiene la equivalencia pretendida, conservar las diferencias hace visible el límite y evita atribuir al desempeño una variación que también podría depender del instrumento.

Luis Grau

Te dejo un desafío

Esta semana, elige dos versiones de una evaluación que tu equipo conserve. Busca la descripción de una categoría en cada versión y anota qué tarea o criterio cambió. Con esa comparación podrás identificar una pregunta concreta que conviene resolver antes de unir sus notas.

CompartirLinkedInFacebook
Enlace

Selecciona el enlace y usa la opción Copiar de tu dispositivo.

Correo