¿Tests de marca o tests de Similares? Cómo decidir…

Por Fernando Senties.

Diciembre 2015.

Recientemente nos sucedió una historia muy interesante, que a pesar de lo negativa que podría parecer, nos llenó de orgullo,y nos confirmó que vale la pena hacer las cosas bien…

Teníamos un cliente que daba servicios de reclutamiento y selección a una de las empresas más importantes de servicios de taxi privado. Después de mucho tiempo de usar AMITAI, y que la empresa que los había contratado había avalado sus procesos diciendo que obtenían “excelentes resultados”, al grado que ellos mismos decidieron hacer una preselección con los mismos filtros. La empresa proveedora de servicios decidió cambiar de test por así convenir a los intereses, y empezaron los problemas, pues los resultados ya no coincidían. Aunque los tests parecían similares, el sustento, simplemente no estaba ahí presente en los resultados. Lo que no se ve es lo que hacía la gran diferencia. Nos dimos cuenta entonces, de que como en la industria farmacéutica, también hay tests de marca como AMITAI®, y “Tests de Similares”. Se parecen, pero son de dudosa calidad.

Cuando te dedicas al desarrollo y a la publicación de tests de tipo psicométrico, rápidamente te das cuenta de que la mayoría de la gente te hace la pregunta obligada: “¿Y está validado?, ¿Quién lo valida?”. Sin embargo, la experiencia me ha enseñado que en muy pocos casos la gente realmente se mete a investigar un poco más acerca de lo que se les responde. Con una respuesta positiva del vendedor satisface en la mayoría de los casos la pregunta. La mayoría de la gente toma la decisión basada en la “fama” del producto, o recomendaciones que lee o escucha, y damos por hecho que el test ha sido validado si fulano y mengano lo usan. Sin embargo, en un reciente estudio que elaboramos, nos dimos cuenta de que ésto no era así. Los estudios nos han demostrado que se venden en el mercado productos que no tienen nada o poco sustento teórico estadístico, y que al realizar estudios de validez te das cuenta de que su validez es poco mayor a la de “echar una moneda al aire”.

Algunos proveedores de nuevos tests que salen al mercado, aprovechan esta situación, algunos, seguramente buenos, otros, la verdad, yo lo dudo. ¿Cómo decidirlo?, ¿vale siquiera la pena analizar las diferencias? ¿Nos vamos por el precio o evaluamos la relación precio-calidad?

Tests de marca AMITAI o tests de Similares?

¿Por qué es importante?

Los estudios de validez y confiabilidad de un test NO los hacen ni más válidos ni menos válidos, sólo demuestran su grado de validez (qué tanto miden lo que dicen que miden) o su confiabilidad (qué consistencia hay en los resultados al re-aplicarlo). Es decir, tú podrías (teóricamente hablando), tener el mejor test sin estudios de validez, o el peor test con estudios de validez, el problema es que no lo vas a saber si no llevas a cabo los estudios de análisis.

A lo que ésto se reduce, es que cuando vendes un test que no tiene evidencias de su solidez teórico-estadística, simplemente estás engañando a la gente, pues esa gente está tomando decisiones todos los días basado en reportes que sólo Dios sabe si sirven y reflejan la realidad de la gente dentro de los parámetros estadísticos aceptables. Imagínese a evaluadores rechazando gente valiosa por un reporte no confiable, o desechando empleados confiables porque eso dice el reporte. Si pensamos en ello, esto puede tener costos muy negativos, en algunos casos, peores que si no usaras las pruebas, me explico.

La estadística dice que entre un 20 – 25% de la gente entra a una empresa y buscará activamente oportunidades para robar, otro tanto, tiene un alto nivel de “honestidad relativa” que evitará caer en las tentaciones cuando se presenten, el resto, depende de las circunstancias. Si el test que usa, no filtra efectivamente a cuando menos el 95% de esos porcentajes efectivamente, obtendría los mismos o mejores resultados no aplicando nada, pues obtendría similares resultados con la estadística.

Si el test que usa no le da información confiable, y puede demostrar que así es a través de sólidos y reconocidos estudios de validez y confiabilidad, entonces se está poniendo en una situación de vulnerabilidad.

Como dice el dicho: “Si las cosas que valen la pena se hicieran fácilmente, cualquiera las haría”.

En 15 años, ninguna empresa de la que tengamos conocimiento, ha obtenido mejores resultados en sus procesos de selección que cuando han usado AMITAI.

Tests de marca AMITAI o tests de Similares?

¿Recomendación?

Cuando llame a un proveedor de tests, ya sean desarrollos propios o tests del dominio público, debe asegurarse de que quien los vende se tomó la molestia de realizar estudios serios de validez y confiabilidad, pídale y asegúrese que le dan lo siguiente:

1.- ¿Qué estudios se realizaron? Que le detalle de cada estudio realizado:

a. Que le detalle de cada estudio realizado:

b. Con qué fin se realizaron dichos estudios, es decir, qué se pretendía demostrar, y

c. Los resultados obtenidos, en términos estadísticos y en un lenguaje claro

2.- ¿Qué protocolos se siguieron? Asegúrese que tienen un sustento estadístico sólido

a. El tipo de estudio

b. Sustento teórico en el que está basado

c. Población con la que se llevó a cabo

d. El tamaño de la muestra

3.- Exija un manual que exprese claramente todo lo anterior por escrito

4.- Y finalmente, ¡Valide que lo que se le dice, efectivamente es demostrable en la práctica! Los resultados deben ser explicables en términos de los estudios de validez y confiabilidad si la hay.

En AMITAI confiamos en que, aunque cueste más trabajo, seguiremos poniendo la calidad sobre el marketing, pues eventualmente, es lo único que trasciende a través del tiempo. AMITAI es el único test de honestidad de su tipo que tiene toda esta evidencia científica de sus sustento teórico estadístico, y para asegurarlo, AMITAI ha firmado acuerdos con el Dr. Roberto Oropeza, Coordinador del Posgrado en Psicología de La universidad de Michoacán, ex catedrático de asignatura del psicometría en el Tec de Monterrey, y miembro del Sistema Nacional de Investigadores del CONACYT, y Con Dra. En Psicología Roberta Neault de Life Strategies y maestra de psicología en la Universidad de TWU en Canadá, para asegurar que antes de sacar un test al mercado, éste cumpla con los más altos estándares de calidad en el mercado, y que cumple con todo el protocolo científico requerido para garantizar al cliente los resultados que se ofrecen.

SI tiene duda de la validez del test que está usando, llámenos y le daremos la asesoría que necesite para conocerlo.

One Comment

  1. José Pablo Castro-Reply
    8 enero, 2016 at 3:43 pm

    Buenos días,
    Me surgen algunas dudas respecto a la interpretación del test como: ¿porqué si un candidato expresa que le gusta la música clásica se considera que está mintiendo? ó si alguna vez consumió marihuana pero fue 20 años atrás ¿qué tanto repercute en la ecala de consumo de sustancias?
    Es posible que nos hagan llegar un manual donde podamos conocer la forma en que se construyó el manual y así obtener mejores herramientas de interpretación?
    Quedamos en espera de su respuesta y agradecemos de antemano su atención.

    Saludos!

    Jose Pablo Castro
    Recursos Humano Toks

Deja un comentario