Cómo diseñar situational judgment tests: proceso paso a paso
Por qué diseñar tu propio SJT
Los SJT off-the-shelf son genéricos. Miden juicio en vacío, no juicio en tu contexto. Un buen SJT está enraizado en los dilemas específicos de tu rol.
Paso 1: análisis de trabajo y critical incidents
Pregunta a tus top performers: ¿la decisión más difícil en los últimos seis meses? Documenta 8-12 dilemas reales: customer escalation, conflicto de prioridades, cuestión ética, resource constraint, ambigüedad, proceso vs valor, delegación, error a own.
Paso 2: opciones de respuesta
Por cada dilema, brainstorm 5-6 opciones plausibles. Cada opción debe ser defendible por alguien. No buscas una respuesta correcta — sino spectrum de "más efectivo en nuestro contexto" a "menos efectivo." Esto distingue SJT de tests de personalidad.
Lentes: tolerancia al riesgo, velocidad vs calidad, datos vs intuición, proceso vs pragmatismo, individual vs equipo, corto vs largo plazo.
Paso 3: rankear con top performers
No rankees tú. Pide a tus tres top performers, independientemente, que rankeen cada opción. Busca consenso fuerte (revela valores) y desacuerdos (revela ambigüedad o subculturas).
Paso 4: instrucciones de evaluación
Setup de un párrafo: rol, restricción inmediata, por qué la decisión es difícil, qué debe hacer el candidato. 2-3 oraciones.
Paso 5: piloto con recientes hires
Dale a 3-5 recent hires. Score contra master ranking. Revisa preguntas que fallan: si todos eligen lo mismo, no mide nada.
Paso 6: criterios de scoring
- Most-effective: punto solo si top choice = expert. Simple.
- Distance: puntos por proximidad al ranking experto.
- Pattern matching: score según forma de elecciones.
Threshold: 70%? 85%? Refleja requerimientos del rol.
Paso 7: validar
Tras 10-15 hires, compara: correlación con desempeño, adverse impact, predictividad. Itera.
Aplica disciplina de rúbrica de hiring. Calibración previene drift. Layer con preguntas estructuradas.
Pitfalls comunes
- Escenario muy simple
- Opciones no equidistantes en calidad
- Escenario muy específico a una persona
- Metodología no clara
- Demasiadas preguntas (10 alcanzan)
Justicia
Revisa: accesibilidad de lenguaje, equidad en stakes, representación. Mantén complejidad en la decisión, no en traducción cultural.
Implementación
- Tras resume screen
- Antes del interview
- Durante (ejercicio de discusión grupal)
Cuando interpretas resultados SJT, pareja con contexto de entrevista.
SJTs bien diseñados son válidos y justos.