Il ciclo di sviluppo delle certificazioni

Sia a livello di progettazione che di implementazione, seguiamo un processo rigoroso per determinare quali competenze appartengono a un determinato ruolo e come misurarle. Ci basiamo sulle migliori pratiche di misurazione e psicometria per progettare e implementare ogni certificazione. Inoltre, ogni certificazione attiva è sottoposta a un processo continuo di assicurazione qualità per garantire che ciascuna rimanga agli elevati standard qualitativi a cui aspiriamo.

Progettazione e sviluppo della certificazione

Ti sei mai chiesto come determiniamo le competenze misurate in ogni certificazione? Sulla base di un’analisi iniziale dei compiti lavorativi e di interviste con esperti del settore, sviluppiamo una specifica dettagliata della certificazione in consultazione con il nostro comitato consultivo per le certificazioni. Ogni specifica contiene informazioni dettagliate sullo scopo e sul pubblico della certificazione, su quali competenze vengono misurate e su quale sarà la struttura specifica dell’esame. Lo sapevi che tutte le specifiche sono pubbliche? Puoi trovarle qui:

• Data Analyst Associate
• Data Analyst Professional
• Data Scientist Associate
• Data Scientist Professional
• Data Engineer Associate

Il processo di scrittura degli item

Per ogni certificazione, collaboriamo con autori di item che sono professionisti del settore. In questo modo garantiamo che ogni item rifletta le reali competenze richieste sul lavoro. Abbiamo un rigoroso processo di revisione degli item (vedi Figura 1 qui sotto), in cui gli item vengono esaminati da altri autori (revisione SME), internamente dal nostro team contenuti per le certificazioni (revisione interna) e infine, poco prima che siano pronti per essere inseriti in un esame. Sia per gli esami a tempo sia per quelli pratici, esistono linee guida dettagliate su come scrivere item specifici per le competenze misurate, quale linguaggio usare (o non usare), ecc., per garantire che tutti gli item siano equi e privi di bias.

Figura 1. Il processo di revisione degli item in due fasi.

Valutazione degli esami

Ti sei mai chiesto come funzionano gli esami a tempo e pratici e come vengono valutati? Nel manuale tecnico spieghiamo come, per gli esami a tempo, facciamo affidamento sulla teoria della risposta all’item e sui test adattivi computerizzati per ottenere una stima rapida e accurata del tuo livello di abilità in ciascuno dei domini misurati. Infatti, ogni domanda che ricevi all’esame è calibrata in base alla tua performance attuale, permettendoci di determinare in modo efficiente se sei al livello richiesto per la certificazione che stai cercando di ottenere. Il punteggio ottenuto viene quindi confrontato con un punteggio target che devi superare per superare l’esame. Questo punteggio è calcolato simulando centinaia di esami di un candidato ipotetico esattamente al livello che ci aspettiamo dai nostri candidati. In base alla distribuzione dei punteggi attesi per un candidato qualificato, ricaviamo quindi un punteggio target che utilizziamo durante gli esami a tempo.

Monitoraggio della qualità

Monitoriamo continuamente le metriche di qualità per tutti gli esami a tempo, inclusi i tassi di superamento e l’affidabilità di ciascun pool di item utilizzato. In questo modo forniamo costantemente valutazioni affidabili dei domini per cui certifichiamo.

Mentre tutti gli esami a tempo vengono valutati automaticamente, gli esami pratici sono valutati automaticamente (Data Engineer Associate) o da valutatori umani. Per garantire che la valutazione sia affidabile, applichiamo un processo di doppia valutazione in cui circa il 30% delle consegne è valutato da almeno due valutatori, entrambi esterni oppure uno esterno e uno interno. Confrontiamo quindi come entrambi i valutatori assegnano i punteggi sulla rubrica e, in caso di disaccordo, viene assegnato un terzo valutatore interno per dirimere le divergenze. Questo processo crea un ciclo di feedback continuo per i valutatori, assicurando che valutino in modo coerente rispetto alla rubrica e assegnino le certificazioni ai candidati che soddisfano i requisiti.

Curioso di sapere cos’altro puoi trovare nel nostro manuale tecnico? Dai un’occhiata!