Ralun

Ralun / Guías de desempeño

Evaluación del desempeño en varios idiomas: ¿se pueden comparar las notas?

Isotipo oficial de RalunRalun · Lectura estimada: 6 min
CompartirLinkedInFacebook
Enlace

Selecciona el enlace y usa la opción Copiar de tu dispositivo.

Correo
Profesional compara dos documentos en una ilustración editorial.

Cuando una evaluación del desempeño se usa en más de un idioma, traducir las preguntas es solo el comienzo.Una expresión puede cambiar de sentido y una opción de respuesta puede desaparecer.Esta guía ayuda a registrar esas diferencias y decidir qué evidencia falta antes de combinar resultados.

Define usos, idiomas y comparaciones esperadas

Antes de pedir una traducción, escribe para qué se usará cada versión. No es la misma decisión ayudar a una persona a conversar sobre su desarrollo que ordenar resultados de equipos que respondieron en idiomas distintos. La segunda exige justificar que los resultados pueden interpretarse para esa comparación.

Al revisar los cambios de versión de un modelo de competencias, conserva qué criterio corresponde a cada aplicación. Registra quién responderá, qué trabajo observará, qué decisiones se apoyarán en las respuestas y qué idiomas o variantes se necesitan. Revisa también el contexto de uso: una misma expresión puede entenderse de manera distinta en dos lugares que comparten idioma. No atribuyas automáticamente esa diferencia a la nacionalidad; comprueba cómo se usa en el trabajo concreto.

Las directrices de la International Test Commission distinguen traducción y adaptación de pruebas. La adaptación incluye revisar el significado, la administración y la evidencia necesaria para interpretar resultados. Son una orientación para este trabajo; aplicarlas como lista no certifica una evaluación del desempeño.

Conserva el significado del criterio antes de traducir

Un modelo de competencias por cargo puede ayudar a precisar niveles antes de adaptar las preguntas. Describe primero la conducta que quieres observar y las condiciones en que se espera. Si el criterio es autonomía, precisa qué decisiones puede tomar la persona por sí sola, cuándo debe consultar y qué evidencia puede observar quien evalúa. Esa descripción sirve de referencia para revisar cada versión.

Pide a especialistas del trabajo y a revisores competentes en los idiomas y contextos implicados que examinen las expresiones. La traducción inversa puede ayudar a detectar discrepancias, pero una coincidencia de palabras no demuestra que dos versiones provoquen la misma interpretación. Guarda las decisiones y no copies preguntas de instrumentos protegidos sin comprobar los permisos correspondientes.

Prueba comprensión y administración de las versiones

Presenta cada versión a personas que trabajen en los contextos donde se usará y pregúntales qué entienden por la pregunta, cómo elegirían una respuesta y qué información necesitarían. Registra las interpretaciones, las dudas y los cambios propuestos. Comprueba también instrucciones, orden, escala y posibilidad de responder "no observado" cuando corresponda.

Un piloto de evaluación del desempeño ayuda a ordenar las comprobaciones de administración, y la capacitación de evaluadores prepara a quienes aplican las instrucciones. Una prueba cualitativa puede mostrar problemas que conviene corregir; por sí sola no demuestra equivalencia psicométrica ni autoriza a intercambiar puntuaciones. Antes de una comparación decisoria entre versiones, solicita un diseño de evaluación adecuado al uso y apoyo especializado.

Resuelve dos problemas de adaptación del caso

El siguiente ejemplo es ficticio. Un equipo de recursos humanos prepara versiones en español y portugués para conversar sobre desempeño. Quiere conservar el significado de un criterio y revisar si las opciones de respuesta permiten registrar la misma situación. No son traducciones certificadas ni una escala validada.

Problema observado en la revisiónDecisiónLímite
En una versión, "actúa con autonomía" se interpreta como actuar sin consultar; en la otra, como decidir dentro de la autoridad acordada.El equipo reescribe el criterio con especialistas y vuelve a comprobar cómo se entiende el límite de autoridad en ambas versiones.Corregir la frase no demuestra que las puntuaciones sean equivalentes.
Una versión permite responder "no observado" y la otra obliga a elegir una categoría de desempeño.El equipo alinea las condiciones de respuesta y repite la prueba de administración.No combina las distribuciones obtenidas con opciones distintas como si fueran directamente comparables.

Revisa un requisito multilingüe del ciclo con Ralun: lleva un ejemplo anonimizado y comprueba qué recorrido puede demostrarse.

La salida útil no es solo una versión corregida. Conserva el historial: qué cambió, por qué, quién revisó y qué uso sigue pendiente de evidencia.

Registra las decisiones de adaptación

Usa una tabla como esta dentro del proceso. Cada fila puede representar una pregunta o condición de respuesta.

Uso previstoCriterio y conductaIdioma y versiónInterpretación observadaCondición de respuestaRevisión y cambioLímite comparativo
Conversación de desarrolloAutonomía dentro de autoridad acordadaEspañol, versión inicialUna persona entiende que nunca debe consultarIncluye "no observado"Aclarar cuándo consultar y volver a probarNo combinar puntuaciones hasta evaluar el uso propuesto

Este registro es una pauta editorial de trabajo. No reemplaza un estudio de validación ni acredita que el instrumento sea apto para todas las decisiones.

Decide qué resultados aún no debes combinar

Para profundizar en el análisis y comparación de resultados, identifica primero qué comparación tiene respaldo. Separa la lectura local y exploratoria de una comparación formal entre versiones. Puedes usar los hallazgos de comprensión para mejorar una conversación o identificar preguntas confusas, siempre explicando sus límites. Evita presentar un promedio conjunto como si las diferencias de idioma, contexto y administración ya estuvieran resueltas.

La ausencia de diferencias visibles tampoco prueba equivalencia. Documenta qué comparación se propone, qué evidencia la respalda, qué incertidumbres quedan y quién tiene la responsabilidad técnica de decidir. Si falta evidencia pertinente, conserva los resultados separados y posterga la comparación combinada.

Prueba el requisito concreto en el sistema

Antes de elegir una herramienta, lleva un ejemplo anonimizado y pide comprobar el recorrido concreto: qué idioma necesita cada participante, cómo se presenta la pregunta y cómo se identifica la versión utilizada. Pregunta qué puede demostrarse en el entorno disponible y qué requiere un procedimiento externo o revisión humana. No supongas traducción ni comparabilidad automática. Agenda una conversación para revisar el requisito con un ejemplo anonimizado y las decisiones que necesita tomar tu equipo.

Preguntas frecuentes

¿Basta con traducir y hacer traducción inversa?

No. Son pasos posibles de la adaptación, pero no sustituyen la revisión contextual, la administración adecuada ni la evidencia necesaria para el uso e interpretación propuestos.

¿Una prueba de comprensión demuestra equivalencia?

No por sí sola. Ayuda a detectar interpretaciones inesperadas; la comparación de puntuaciones puede requerir estudios adicionales diseñados para ese uso.

¿Debo esperar para usar cualquier versión?

Depende de la decisión. Una revisión exploratoria local y una comparación entre grupos implican usos distintos. Documenta las limitaciones y consulta a especialistas antes de tomar decisiones que dependan de la equivalencia.

Conclusión

Adaptar una evaluación empieza por preservar lo que se quiere observar y continúa con la revisión de comprensión, condiciones de respuesta y evidencia para cada uso. Las versiones pueden mejorar mediante pruebas pequeñas; la posibilidad de combinar sus notas requiere una justificación adicional. Dejar constancia de esa diferencia evita presentar una traducción como una validación.

Luis Grau

Te dejo un desafío

Esta semana, elige un criterio que se use en más de un idioma. Escribe primero la conducta que esperas observar y pide a una persona de cada contexto que explique la pregunta con sus palabras. Compara sus respuestas y registra qué debes aclarar antes de usar las notas.

CompartirLinkedInFacebook
Enlace

Selecciona el enlace y usa la opción Copiar de tu dispositivo.

Correo