El ciclo de desarrollo de la certificación

Tanto en el diseño como en la implementación, seguimos un proceso riguroso para determinar qué competencias corresponden a cada rol y cómo las medimos. Nos basamos en las mejores prácticas de medición y psicometría para diseñar e implementar cada certificación. Además, cada certificación activa pasa por un proceso continuo de aseguramiento de la calidad para garantizar que se mantenga al nivel de excelencia que buscamos.

Diseño y desarrollo de la certificación

Quizá te preguntes cómo determinamos las competencias que se evalúan en cada certificación. A partir de un análisis inicial de tareas del puesto y entrevistas con expertos del sector, elaboramos una especificación detallada de la certificación en consulta con nuestro panel asesor de certificaciones. Cada especificación incluye información detallada sobre el propósito y el público objetivo de la certificación, qué competencias se miden y cuál será la estructura específica del examen. ¿Sabías que todas las especificaciones son públicas? Puedes consultarlas aquí:

• Data Analyst Associate
• Data Analyst Professional
• Data Scientist Associate
• Data Scientist Professional
• Data Engineer Associate

El proceso de redacción de ítems

Para cada certificación, colaboramos con redactores de ítems que son profesionales del sector. Así nos aseguramos de que cada ítem refleje las habilidades reales que se esperan en el trabajo. Contamos con un riguroso proceso de revisión de ítems (consulta la figura 1 más abajo), en el que los ítems son revisados por otros redactores (revisión de expertos), internamente por nuestro equipo de contenidos de certificación (revisión interna) y, por último, justo antes de estar listos para incorporarse a un examen. Tanto para los exámenes cronometrados como para los prácticos, existen directrices detalladas sobre cómo redactar ítems específicos para las competencias evaluadas, qué lenguaje usar (o evitar), etc., a fin de garantizar que todos los ítems sean justos y estén libres de sesgos.

Figura 1. Proceso de revisión de ítems en dos etapas.

Calificación de exámenes

¿Alguna vez te has preguntado cómo funcionan los exámenes cronometrados y prácticos y cómo se califican? En el manual técnico explicamos que, para los exámenes cronometrados, nos basamos en la teoría de respuesta al ítem y en pruebas adaptativas informatizadas para obtener una estimación rápida y precisa de tu nivel en cada uno de los dominios evaluados. De hecho, cada pregunta que recibes en el examen se ajusta a tu rendimiento actual, lo que nos permite determinar con eficiencia si cumples el nivel requerido para la certificación que quieres obtener. La puntuación que consigues se compara con una puntuación objetivo que debes superar para aprobar el examen. Esta puntuación se calcula simulando cientos de exámenes de un candidato hipotético que está exactamente en el nivel que esperamos de nuestras personas candidatas. A partir de la distribución de puntuaciones esperadas para un candidato cualificado, derivamos la puntuación objetivo que utilizamos en los exámenes cronometrados.

Supervisión de calidad

Supervisamos de forma continua métricas de calidad para todos los exámenes cronometrados, como las tasas de aprobado y la fiabilidad de cada banco de ítems utilizado. De este modo, proporcionamos evaluaciones consistentes y fiables de los dominios que certificamos.

Aunque todos los exámenes cronometrados se califican automáticamente, los exámenes prácticos se califican de forma automática (Data Engineer Associate) o mediante evaluadores humanos. Para asegurar una calificación fiable, aplicamos un proceso de doble corrección en el que aproximadamente el 30% de las entregas se califican al menos por dos evaluadores, ya sean ambos externos o uno externo y otro interno. Luego comparamos cómo ambos evaluadores aplican la rúbrica y, en caso de desacuerdo, se asigna un tercer evaluador interno para resolverlo. Este proceso crea un bucle continuo de feedback para garantizar que se califica de forma coherente con la rúbrica y que las certificaciones se conceden a quienes cumplen los requisitos.

¿Tienes curiosidad por ver qué más incluye nuestro manual técnico? Échale un vistazo.