Cómo el mal uso de pruebas psicométricas puede sesgar la identificación de talento

Las evaluaciones psicométricas pueden mejorar la identificación de talento cuando miden variables relevantes para el cargo y sus resultados se interpretan de acuerdo con evidencia técnica. Sin embargo, su uso incorrecto puede excluir candidatos con potencial, amplificar sesgos en la selección de personal y llevar a conclusiones que la evaluación realmente no permite sustentar.

El problema, entonces, no está necesariamente en utilizar evaluaciones psicométricas, sino en qué se mide, para qué se mide y cómo se utilizan los resultados para tomar decisiones.

Aplicar una prueba diseñada para un propósito diferente, utilizar el mismo perfil para cargos distintos, interpretar un puntaje como una verdad absoluta o establecer puntos de corte sin suficiente sustento son algunos ejemplos de prácticas que pueden distorsionar la evaluación de talento.

Por eso, utilizar evaluaciones psicométricas correctamente implica mucho más que aplicar una prueba y revisar un resultado.

¿Cómo puede el mal uso de pruebas psicométricas sesgar la identificación de talento?

El mal uso de pruebas psicométricas puede sesgar la identificación de talento cuando los resultados se interpretan fuera de su propósito, se utilizan variables poco relacionadas con el cargo o se convierten los puntajes en criterios rígidos de exclusión sin suficiente evidencia que respalde esa decisión.

Esto puede generar dos errores especialmente relevantes.

El primero es descartar personas que podrían tener las capacidades necesarias para desempeñarse adecuadamente.

El segundo es considerar como idóneas a personas cuyo resultado en una prueba no necesariamente predice aquello que la organización espera de ellas.

En ambos casos, el problema no es únicamente psicométrico. También puede convertirse en un problema de negocio.

Una mala decisión de evaluación puede afectar la calidad de la contratación, reducir la diversidad de perfiles disponibles, limitar la identificación de potencial y aumentar los errores en decisiones de promoción o desarrollo.

Una prueba no es válida para cualquier decisión

Uno de los errores más frecuentes consiste en pensar que una prueba es simplemente “válida” o “no válida”.

En psicometría, la pregunta es más específica:

¿Existe evidencia suficiente para respaldar la interpretación que queremos hacer de ese resultado y el uso que queremos darle?

Los Standards for Educational and Psychological Testing, desarrollados conjuntamente por AERA, APA y NCME, establecen precisamente que la validez se refiere al grado en que la evidencia y la teoría respaldan las interpretaciones de los puntajes para usos determinados. Es decir, lo que debe sustentarse no es la prueba de manera abstracta, sino la interpretación que hacemos de sus resultados para un propósito específico.

Esto tiene una consecuencia muy importante para recursos humanos.

Una evaluación que puede aportar información valiosa para desarrollo no necesariamente cuenta con la misma evidencia para utilizarse como filtro de contratación.

De la misma manera, una variable relacionada con el desempeño de un cargo podría tener mucho menos valor para otro.

La validez de las evaluaciones depende, por tanto, de la relación entre:

lo que medimos + cómo interpretamos el resultado + la decisión que queremos tomar.

Cuando uno de estos tres elementos pierde conexión con los demás, aumenta el riesgo de cometer errores.

8 formas en las que una evaluación psicométrica puede utilizarse mal

El mal uso de pruebas psicométricas no siempre es evidente. En muchas organizaciones ocurre dentro de procesos que parecen estructurados y técnicamente sólidos.

Estas son algunas de las situaciones que conviene revisar.

1. Evaluar variables que no son relevantes para el cargo

Medir más características no significa necesariamente evaluar mejor.

Una batería puede incluir numerosas variables de personalidad, competencias o capacidades y, aun así, aportar poca información útil si esas características no están relacionadas con las exigencias reales de la posición.

Por ejemplo, encontrar una puntuación determinada en liderazgo podría resultar poco relevante para una posición que no requiere dirigir personas.

El primer paso de una buena evaluación debería ser, por tanto, comprender:

¿Qué necesita realmente una persona para responder a las exigencias de este cargo?

Solo después debería definirse qué evaluar.

2. Utilizar la misma batería para cargos diferentes

Aplicar exactamente las mismas evaluaciones y criterios a todos los candidatos puede parecer una manera de estandarizar el proceso.

Sin embargo, estandarizar la aplicación no significa homogeneizar los perfiles.

Un ejecutivo comercial, un analista financiero, un líder de operaciones y una persona responsable de servicio al cliente enfrentan demandas distintas.

Las variables relevantes, su importancia y los niveles esperados pueden cambiar dependiendo del rol.

Utilizar un único modelo para todos puede terminar premiando un determinado tipo de persona en lugar de identificar a quien mejor puede responder a cada posición.

3. Convertir los puntajes en etiquetas

Un puntaje psicométrico describe un resultado dentro de un sistema de medición.

No necesariamente significa:

“bueno” o “malo”.

“apto” o “no apto”.

“tiene potencial” o “no tiene potencial”.

Su significado depende de aquello que se está midiendo, de la posición y de la forma en que esa característica puede manifestarse en un contexto determinado.

Una puntuación alta en una variable incluso puede ser favorable para determinados cargos y menos conveniente para otros.

Cuando los resultados se convierten automáticamente en etiquetas, la evaluación de talento pierde profundidad.

4. Establecer puntos de corte arbitrarios

Otro riesgo aparece cuando la organización determina que cualquier persona por debajo de cierto puntaje debe ser eliminada del proceso.

Los puntos de corte pueden ser útiles cuando existe evidencia suficiente para sustentarlos.

El problema aparece cuando surgen de decisiones como:

“queremos candidatos por encima de 80”

sin demostrar por qué 80 representa un nivel relevante para el desempeño del cargo.

Un punto de corte arbitrario puede producir falsos negativos: candidatos potencialmente adecuados que son eliminados por una diferencia de pocos puntos cuyo significado real podría ser limitado.

Las buenas prácticas en selección recomiendan que los procedimientos utilizados estén relacionados con el trabajo y sean apropiados para el propósito para el cual se aplican.

5. Tomar una decisión basándose únicamente en la prueba

Las evaluaciones psicométricas pueden aportar información difícil de obtener mediante otros métodos.

Eso no significa que deban convertirse en la única fuente para tomar una decisión.

Un proceso de selección de personal puede integrar diferentes evidencias:

• Evaluaciones psicométricas.
• Entrevistas estructuradas.
• Experiencia.
• Conocimientos.
• Ejercicios relacionados con el cargo.
• Referencias.
• Antecedentes relevantes para la posición.

Cada fuente permite observar aspectos diferentes.

La evaluación psicométrica debería ayudar a construir una comprensión más completa de la persona, no reemplazar automáticamente todas las demás fuentes de información.

6. Interpretar más de lo que la evaluación realmente mide

Este es uno de los errores más delicados.

Si una prueba mide una característica específica, sus resultados no deberían utilizarse para inferir automáticamente otras características que no fueron evaluadas.

Por ejemplo:

una medición de personalidad no equivale automáticamente a una medición de competencias.

una evaluación de desempeño actual no necesariamente permite concluir potencial futuro.

una preferencia conductual no necesariamente determina capacidad.

Cuando una organización convierte un resultado específico en una explicación general de la persona, aumenta la posibilidad de tomar decisiones basadas en conclusiones que el instrumento no sustenta.

7. Ignorar el contexto de aplicación

Idioma, características de la población, condiciones de aplicación, instrucciones, acceso tecnológico y otros elementos pueden afectar la calidad de una evaluación.

También importa la consistencia.

Si algunos candidatos realizan la evaluación bajo condiciones controladas y otros reciben instrucciones distintas o ayudas adicionales, la comparabilidad de los resultados puede deteriorarse.

La estandarización es precisamente uno de los elementos que permite que las diferencias encontradas entre personas tengan una interpretación más consistente.

8. No revisar si el perfil sigue siendo relevante

Los cargos cambian.

También cambian los procesos, las tecnologías, los modelos de liderazgo y las capacidades necesarias para desempeñarse dentro de una organización.

Una batería definida años atrás puede dejar de representar adecuadamente las demandas actuales de una posición.

Por esta razón, revisar periódicamente los criterios de evaluación es una buena práctica.

Las recomendaciones técnicas para selección señalan precisamente la importancia de revisar los procedimientos cuando cambian los requerimientos del trabajo, de manera que continúen siendo relevantes para aquello que se pretende predecir.

¿Las pruebas psicométricas tienen sesgos?

Una evaluación psicométrica puede presentar problemas de sesgo o equidad, pero también puede ocurrir que una herramienta técnicamente adecuada produzca decisiones sesgadas debido a la forma en que la organización utiliza o interpreta sus resultados.

Por eso conviene diferenciar tres conceptos.

No son exactamente el mismo fenómeno.

Una organización puede tener una excelente prueba y utilizarla incorrectamente.

También puede aplicar una metodología aparentemente objetiva que genere sistemáticamente resultados desfavorables para un grupo determinado.

Por eso, evaluar la calidad de un proceso requiere revisar tanto el instrumento como las decisiones construidas a partir de él.

¿Cómo puede una mala evaluación ocultar potencial?

Uno de los mayores riesgos del uso incorrecto de las evaluaciones psicométricas es confundir correspondencia con un perfil con potencial.

Imaginemos una organización que define como “talento ideal” a quienes más se parecen a sus colaboradores actuales de alto desempeño.

Inicialmente puede parecer lógico.

Pero si esas personas fueron seleccionadas dentro de un modelo de talento muy específico, construir todos los perfiles futuros a su semejanza puede terminar reproduciendo las mismas características una y otra vez.

La organización podría dejar por fuera personas con:

• Formas diferentes de resolver problemas.
• Estilos distintos de liderazgo.
• Trayectorias menos tradicionales.
• Fortalezas complementarias.
• Capacidad de aprendizaje.
• Potencial para responder a desafíos futuros.

La consecuencia sería paradójica:

una herramienta creada para identificar diferencias entre personas terminaría utilizándose para buscar personas cada vez más parecidas.

¿Cómo afectan los sesgos psicométricos a la selección de personal?

Cuando una evaluación se utiliza incorrectamente, el problema puede trasladarse a toda la cadena de selección.

Por eso, reducir sesgos no significa dejar de medir.

Significa medir mejor.

¿Las evaluaciones psicométricas pueden reducir el sesgo humano?

Sí. Cuando están bien diseñadas, son pertinentes para el cargo y se aplican e interpretan de manera estandarizada, las evaluaciones psicométricas pueden aportar una fuente estructurada de evidencia que reduzca la dependencia de impresiones subjetivas.

En una entrevista poco estructurada pueden intervenir factores como:

• Afinidad personal.
• Primera impresión.
• Semejanza con quien entrevista.
• Expectativas previas.
• Estereotipos.
• Confirmación de una hipótesis inicial.

Una evaluación estructurada permite analizar a las personas bajo criterios más comparables.

Pero esto no significa que la psicometría elimine automáticamente los sesgos.

La estandarización pierde valor si posteriormente alguien interpreta los resultados de forma subjetiva o utiliza criterios que no tienen suficiente relación con el cargo.

Por eso, la pregunta no debería ser:

“¿Utilizamos pruebas psicométricas o criterio humano?”

Una pregunta más útil sería:

“¿Cómo combinamos evidencia estructurada y juicio profesional para tomar una mejor decisión?”

¿Qué papel tiene la validez en la identificación de talento?

La validez permite determinar si existe suficiente evidencia para utilizar los resultados de una evaluación de la manera propuesta. Es especialmente importante en identificación de talento porque un mismo puntaje puede ser útil para una decisión y no estar suficientemente respaldado para otra.

Esta distinción cambia profundamente la forma de evaluar.

Supongamos que una prueba identifica determinadas características relacionadas con personalidad.

Podría existir evidencia para interpretar esos resultados como tendencias de comportamiento.

Pero eso no significa automáticamente que puedan utilizarse para concluir:

“esta persona tendrá alto desempeño”.

Para llegar a esa conclusión se necesita evidencia adicional que conecte aquello que está siendo medido con el resultado que queremos predecir.

Por eso, las evaluaciones psicométricas en la identificación de talento deberían construirse desde la decisión hacia la medición y no al contrario.

Primero:

¿Qué necesitamos decidir?

Después:

¿Qué variables aportan evidencia para tomar esa decisión?

Y finalmente:

¿Qué evaluaciones permiten medir adecuadamente esas variables?

¿Cómo utilizar evaluaciones psicométricas sin distorsionar el talento?

Una buena práctica puede resumirse en siete pasos.

1. Definir la decisión

Determinar exactamente para qué se utilizará la evaluación: selección, desarrollo, promoción, potencial, sucesión u otro propósito.

2. Comprender el cargo o contexto

Identificar qué características son realmente relevantes para responder a sus demandas.

3. Seleccionar las variables

Definir únicamente aquellas dimensiones que puedan aportar información útil.

4. Elegir evaluaciones con sustento técnico

Revisar la evidencia disponible sobre confiabilidad, validez y condiciones de uso.

5. Definir cómo se interpretarán los resultados

Antes de evaluar candidatos, establecer qué significará cada resultado dentro del proceso.

Esto reduce el riesgo de adaptar la interpretación después de conocer quién obtuvo determinado puntaje.

6. Integrar diferentes evidencias

Combinar la evaluación con otras fuentes de información relacionadas con el cargo.

7. Revisar los resultados del sistema

Analizar periódicamente si el modelo realmente está ayudando a identificar personas que posteriormente presentan los resultados esperados.

Evaluar también significa evaluar la propia evaluación.

¿Qué debería revisar recursos humanos antes de usar una prueba psicométrica?

Antes de incorporar una evaluación a un proceso de talento, conviene responder estas preguntas:

• ¿Qué variable mide?
• ¿Por qué necesitamos medirla?
• ¿Qué relación tiene con el cargo?
• ¿Qué evidencia respalda la interpretación de sus resultados?
• ¿Para qué decisiones fue diseñada?
• ¿Estamos utilizándola para ese mismo propósito?
• ¿Qué población se utilizó como referencia?
• ¿Cómo se administrará la evaluación?
• ¿Existe un punto de corte? ¿Cómo fue definido?
• ¿Qué peso tendrá el resultado dentro de la decisión?
• ¿Qué otras fuentes de información utilizaremos?
• ¿Cómo verificaremos posteriormente si nuestro modelo está funcionando?

Si estas preguntas no tienen respuestas claras, el riesgo no está únicamente en la prueba.

Está en el sistema de decisión construido alrededor de ella.

¿Qué pasa cuando se utilizan evaluaciones con inteligencia artificial?

La incorporación de inteligencia artificial no elimina los principios psicométricos.

Una herramienta puede utilizar algoritmos sofisticados y seguir necesitando demostrar que sus resultados son consistentes, relevantes para el trabajo y apropiados para la decisión que pretende apoyar.

La Society for Industrial and Organizational Psychology señala que las evaluaciones basadas en inteligencia artificial utilizadas en selección y promoción deberían someterse al mismo nivel de escrutinio y estándares fundamentales que las evaluaciones tradicionales, incluyendo precisión predictiva, consistencia, equidad y documentación.

Por eso, innovación tecnológica y rigor psicométrico no deberían verse como alternativas.

Una solución puede ser innovadora y técnicamente rigurosa.

De aplicar pruebas a construir mejores decisiones de talento

El verdadero valor de una evaluación no está en producir un puntaje.

Está en mejorar una decisión.

Por eso, una organización debería desconfiar tanto de dos extremos:

tomar decisiones exclusivamente por intuición

como

tomar decisiones exclusivamente porque un algoritmo o una prueba produjo determinado número.

Entre ambos extremos existe una alternativa más sólida: utilizar información psicométrica pertinente, técnicamente sustentada y combinada con otras evidencias relevantes.

En Psigma entendemos que evaluar talento implica reconocer que las personas son más complejas que un único resultado.

Por eso, la evaluación debería permitir comprender diferentes dimensiones relevantes para cada decisión y dar contexto a los resultados, en lugar de reducir a la persona a una etiqueta.

El propósito no es aplicar más pruebas.

Es utilizar mejor la información para ver en las personas lo que otros no ven.

Preguntas frecuentes sobre el mal uso de pruebas psicométricas

¿Las pruebas psicométricas pueden sesgar una selección?

Sí, especialmente cuando se utilizan para propósitos diferentes a aquellos que sustentan su interpretación, se aplican criterios arbitrarios o se evalúan variables poco relacionadas con el cargo. Sin embargo, una evaluación bien utilizada también puede reducir la dependencia de apreciaciones subjetivas.

¿Cuál es el error más frecuente al utilizar evaluaciones psicométricas?

Uno de los principales errores es considerar el resultado como una decisión final en lugar de interpretarlo como una fuente de evidencia dentro de un proceso más amplio de evaluación.

¿Una puntuación baja significa que un candidato no es adecuado?

No necesariamente. Su interpretación depende de la variable evaluada, del cargo, del nivel esperado y de la evidencia existente para relacionar ese resultado con la decisión que se está tomando.

¿Qué es la validez de una evaluación psicométrica?

La validez se refiere a qué tan respaldada está por evidencia y teoría una determinada interpretación de los resultados para un uso específico. Por eso, una evaluación no debería considerarse simplemente “válida para todo”.

¿Cómo reducir sesgos en pruebas psicométricas?

Se debe seleccionar variables relacionadas con el cargo, utilizar instrumentos con respaldo técnico, mantener condiciones estandarizadas, justificar los criterios de interpretación y revisar periódicamente los resultados del proceso.

 ¿Es correcto usar la misma prueba para todos los cargos?

No necesariamente. Algunos instrumentos pueden utilizarse en múltiples posiciones, pero las variables relevantes, la interpretación de los resultados y su peso dentro de la decisión pueden cambiar según las exigencias de cada cargo.

¿Una prueba psicométrica debería decidir quién se contrata?

No debería utilizarse automáticamente como única fuente de decisión. Es recomendable integrarla con otras evidencias pertinentes, como entrevistas estructuradas, conocimientos, experiencia y ejercicios relacionados con la posición.

¿Cómo saber si una evaluación está identificando realmente talento?

La organización debería analizar posteriormente si los resultados de la evaluación guardan relación con los criterios que pretendía anticipar, como desempeño, competencias, adaptación u otros resultados relevantes para el cargo.