La mayoría de las páginas que posicionan para evaluación por simulación de trabajo las escriben proveedores, y te lo digo de entrada: esta también. Lo que noté al leerlas es que la frase dejó de significar una sola cosa. La he visto usada para un cuestionario de opción múltiple con un párrafo de contexto arriba, un ejercicio de planilla hecho en solitario, un roleplay con un gerente de contratación, un ejercicio donde los datos están repartidos entre varias personas, y uno donde después tienes que defender la decisión frente a alguien que no está de acuerdo. Miden cosas muy distintas. Si eres recruiter con vacantes abiertas en ventas, customer success, producto e ingeniería al mismo tiempo, te van a ofrecer los cinco con el mismo nombre. Este artículo te da una escalera para ordenarlos y cinco preguntas para hacer antes de comprar.
Qué cubre el nombre, y qué esconde
Una evaluación por simulación de trabajo es un ejercicio previo a la contratación que pone al candidato dentro de alguna versión del puesto y evalúa lo que hace. La Oficina de Administración de Personal de Estados Unidos describe las muestras de trabajo y simulaciones como tareas que reflejan lo que los empleados de verdad hacen, y esa definición está bien hasta donde llega. El problema está en "alguna versión". Una versión puede conservar casi todo lo que tiene el puesto, o puede quedarse con un párrafo de escenografía y tirar el resto.
Aquí va mi sesgo, para que lo descuentes. Skillvee es una simulación de 60 minutos de un "día de trabajo" que reemplaza el filtro telefónico del recruiter y la primera ronda técnica. El candidato resuelve un desafío real, habla con compañeros de IA para conseguir la información que necesita y defiende sus decisiones en una llamada, mientras se graba la pantalla. Puedes ver cómo funciona la simulación. Estamos en lo más alto de la escalera que sigue, que es justamente por lo que creo que la escalera importa, y por lo que deberías revisar si la dibujé de forma justa.
La escalera de fidelidad: cinco peldaños de simulación de trabajo
Cada peldaño agrega una cosa que el trabajo real tiene y que el peldaño de abajo quita. Nada en la escalera es inútil. Responden preguntas distintas, y el error que más veo es comprar un peldaño bajo esperando la respuesta de uno alto.
| Peldaño | Qué hace el candidato | Qué agrega | Qué mide | Qué le hace la IA |
|---|---|---|---|---|
| 1. Juicio situacional | Lee un escenario, elige u ordena respuestas | Un contexto con forma de trabajo | Lo que dice que haría | Un modelo elige la respuesta de manual al instante |
| 2. Muestra de trabajo en solitario | Recibe un brief completo, produce un entregable solo | Un entregable real | Si puede producir el entregable | Aparece un borrador competente en un minuto si el brief está completo |
| 3. Roleplay con guion | Habla con una contraparte que interpreta un papel fijo | Otra persona | Cómo maneja una conversación en vivo | Más difícil de delegar en vivo, aunque los copilotos en tiempo real están acortando esa distancia |
| 4. Simulación con varias personas | Reúne información repartida entre varias personas y fuentes, y después hace el trabajo | La información no está en el brief | Si va a buscar lo que falta, y lo usa | La IA pasa a ser una herramienta dentro del trabajo en vez de un atajo |
| 5. Simulación defendida | El peldaño 4, y después explica y defiende la decisión frente a alguien que la cuestiona | Rendir cuentas por la decisión | Si entiende lo que construyó y lo que sacrifica | Escuchas si el razonamiento era suyo |
El salto que más importa es del peldaño 2 al 4. Casi nadie en un trabajo de oficina recibe un brief completo. El dato decisivo lo tiene un colega, está en un ticket viejo o en un número que nadie revisó, y buena parte del trabajo es notar el hueco y cerrarlo. Escribí sobre esto en detalle en ejemplos de muestras de trabajo, con el nombre de la prueba de la información faltante. Un ejercicio del peldaño 2 quitó esa parte del trabajo a propósito, lo que tenía sentido cuando producir el entregable era lo difícil. Ya no lo es.
Prueba de juicio situacional vs simulación de trabajo
Una prueba de juicio situacional es un formato legítimo con mucha historia. Es barata de correr a volumen y es consistente. Te dice si un candidato reconoce la respuesta sensata cuando le pones cuatro en una página. Lo que no te puede decir es si se le habría ocurrido sin ayuda, a mitad de una tarde caótica, con un cliente esperando. Son habilidades distintas, y la segunda suele ser la que el gerente de contratación tiene en mente cuando dice que quiere ver a alguien trabajar.
No creo que los proveedores que venden el peldaño 1 como simulación de trabajo estén siendo deshonestos. La palabra se fue desplazando, y un cuestionario con escenarios es una simulación en un sentido amplio. Pero cuando un gerente de contratación escucha "simulación de trabajo" se imagina el peldaño 4, así que si compras el peldaño 1 vas a pasar el siguiente trimestre explicando por qué los puntajes no dijeron nada sobre cómo un candidato maneja esa tarde caótica. Pide tomar la evaluación tú mismo antes de firmar. Vas a saber en qué peldaño está en unos cinco minutos.
Cinco preguntas para hacer antes de comprar una prueba de simulación de trabajo
Sirven con cualquier proveedor, nosotros incluidos. Cada una ubica el producto en la escalera, y ninguna necesita conocimientos técnicos para hacerla.
- ¿La respuesta está en el brief? Si un candidato puede terminar el ejercicio solo con lo que le entregan, es peldaño 1 o 2, por realista que se vea la escenografía.
- ¿Con quién puede hablar el candidato, y esa contraparte se comporta igual con todos? Un gerente de contratación improvisando como comprador es un peldaño 3 sin guion, y además es la parte menos consistente de casi cualquier proceso, porque al cuarto candidato del día le toca un comprador cansado que ya leyó el CV.
- ¿El candidato puede usar las herramientas que usaría en el puesto, IA incluida, y qué se evalúa cuando las usa? Una prueba que prohíbe la IA está midiendo un trabajo que no existe. Una que la permite sin evaluar cómo se usa no distingue el aprovechamiento de IA de un copiar y pegar.
- ¿Qué evidencia hay detrás de un puntaje? Quieres hacer clic en una calificación y ver el momento que la produjo: la pregunta que hizo, o la decisión que tomó cuando llegó la respuesta. Un número sin rastro es difícil de defender frente a un gerente de contratación y más difícil frente a un candidato rechazado.
- ¿El candidato tiene que defender una decisión frente a alguien que no está de acuerdo? Ese es el peldaño 5, y es el que detecta el trabajo que el candidato no hizo de verdad.
Si un proveedor responde bien las cinco, estás mirando un peldaño 4 o 5. Si responde la primera con "el escenario es muy realista", probablemente estás mirando un peldaño 1.
Qué peldaño para qué rol
No necesitas el peldaño más alto para todo, y prefiero decírtelo antes de que lo descubras por el lado caro.
Para roles de alto volumen donde el trabajo es procedimental, un filtro de peldaño 1 o 2 muchas veces es la decisión correcta. Es barato y consistente, y el puesto no depende de conseguir información que falta. Para un rol de ventas, la conversación es el trabajo, así que yo no bajaría del peldaño 3, y el comprador tiene que comportarse igual con todos los candidatos o la comparación no significa nada. La elección más amplia de herramientas está en pruebas para contratar vendedores. La versión con comprador fijo la escribí completa en roleplay de ventas en la entrevista. Customer success y producto van en el peldaño 4 como mínimo, porque todo el trabajo es sacarle el problema real a gente que no lo cuenta sola; hay un ejemplo trabajado en el caso práctico de entrevista de customer success. Los roles de ingeniería y datos van en el peldaño 4 o 5 ahora que un take-home en solitario lo puede terminar un modelo, que es el argumento que hago en la alternativa a la prueba take-home.
Entre funciones, mientras más del trabajo pasa entre personas, más arriba en la escalera tiene que estar la evaluación para poder verlo.
Dónde se pone difícil
Subir la escalera cuesta algo, y conviene que sepas qué antes de comprometerte.
El costo sube con cada peldaño. La propia guía de la OPM advierte que las simulaciones son caras de construir y de administrar con observadores entrenados, y es cierto. Un ejercicio casero de peldaño 4 se come una hora de un colega por candidato. Eso está bien para las seis personas a las que igual ibas a hacerles el filtro telefónico, y no escala a doscientos postulantes. Es buena parte de por qué nuestras contrapartes son compañeros de IA, y también una razón por la que podrías quedarte razonablemente en un peldaño más bajo para algunos roles.
La consistencia también se resiente. Una persona que conduce una defensa de peldaño 5 cuestiona distinto al sexto candidato que al primero, y un guion solo arregla parte de eso.
Y a algunos candidatos los peldaños altos les parecen raros al principio, sobre todo hablar con contrapartes de IA. Lo que ayuda es decir claramente qué está pasando: el brief está incompleto a propósito, las personas que saben más están disponibles y preguntarles es parte del trabajo. En mi experiencia, los candidatos que son buenos en el trabajo se relajan cuando lo escuchan, aunque eso lo llamaría una observación y no un hallazgo.
Si quieres ver cómo se ve el peldaño 5 en una de tus vacantes abiertas, eso sí vale una hora de tu tiempo.