Desde que los candidatos empezaron a tener una IA abierta en la pestaña de al lado, es difícil confiar en una prueba de razonamiento. Construimos una que, por diseño, hace más difícil hacer trampa, porque la pregunta permanece en pantalla solo mientras el candidato la mantiene presionada.
Tres ítems de ejemplo, en vivo, con la traza de interacción al lado. Nada se califica y nada se registra. En un celular, gírelo en horizontal.
Hoy cualquier prueba de razonamiento puede responderse con un celular en la otra mano del candidato, y la mayoría de los proveedores reaccionan buscando preguntas que la IA no pueda resolver, una carrera que se pierde en cuestión de meses, todas las veces. Nosotros, en cambio, hicimos que pedir ayuda sea más lento que hacer el trabajo, porque la pregunta solo existe mientras el candidato la mantiene presionada y al reloj no le importa por qué la soltó.
La prueba también se ajusta a cada candidato, de modo que un postulante fuerte no se aburre con preguntas fáciles y uno más débil no queda sepultado por preguntas difíciles, y cada puntaje está en la misma escala sin importar qué preguntas vio la persona. Las preguntas nuevas se calibran con rapidez y el banco se renueva con regularidad, así que nada permanece en circulación el tiempo suficiente para filtrarse.
Aplíquela sola, o agregue validación facial y supervisión (proctoring) opcional por video con IA, una alerta para que una persona la revise, en Podium365 cuando también quiera descartar a un suplantador o a un ayudante.
El reloj arranca la primera vez que el candidato mantiene presionada la esfera en un ítem y a partir de ahí corre sin detenerse, sin acelerarse ni pausarse nunca, hasta que se agota o comienza el siguiente ítem.
Cada movimiento para alcanzar la esfera queda registrado, desde qué tan recta es la trayectoria y las pequeñas correcciones en el camino hasta dónde cae la velocidad máxima y el temblor natural de una mano humana. Las personas tienen una firma; los scripts, no.
La esfera se comporta de forma ligeramente distinta en cada sesión. Una persona se ajusta en unos pocos intentos, mientras que un script que reproduce un movimiento aprendido o no se ajusta o se ajusta mal.
La verificación devuelve un puntaje y las razones que lo sustentan para que una persona los revise, y ninguna decisión sobre un candidato se basa solo en eso.
Verbal, numérico y abstracto, en una sola sesión y en cualquier dispositivo. Los modos de tecla sostenida y de lector de pantalla vienen integrados, con el mismo bloqueo y el mismo reloj.
El estudio de integridad detrás de este diseño, en el Open Science Framework →
El razonamiento verbal, numérico y abstracto funcionan, cada uno, como una escalera de niveles de dificultad. Una respuesta correcta sube al candidato, una incorrecta lo baja, y la siguiente pregunta se toma del nivel en el que está, de modo que un candidato fuerte no se aburre y uno más débil no queda sepultado.
Los puntajes provienen de un modelo de respuesta al ítem, de modo que todos los ítems están en una misma escala de dificultad y un puntaje significa lo mismo sin importar qué ítems encontró el candidato. Cada escala se detiene cuando la estimación de la habilidad es suficientemente precisa, y no tras un número fijo de ítems.
La forma en que se realizó la prueba se traduce en un puntaje de confianza para la sesión, basado en un modelo, y un puntaje bajo genera una alerta con sus razones para que una persona la revise. Ninguna decisión sobre un candidato se basa solo en eso. Nada de lo que responde un candidato es leído por un modelo de IA, y ningún modelo de IA califica, clasifica ni rechaza a un candidato.
En el estudio de integridad publicado que respalda este diseño, un puntaje de confianza construido a partir de cómo se realizó la prueba distingue las sesiones con ayuda de las honestas, y las personas que trabajaron solas casi nunca reciben una alerta.
Lea el estudio de integridad Dónde se usa la IAConstruiremos la primera escena para ese puesto y se la mostraremos, para que vea la prueba real en lugar de leer sobre ella.