Ambito
A cosa si applica questo standard
Sono disponibili due percorsi: uno specifico esame o suite precisamente identificata e un ente certificatore con attività e portfolio definiti. Ogni riconoscimento è limitato al soggetto, alle funzioni, agli esami e alle condizioni indicati nel record pubblico.
Struttura
Sezioni, requisiti ed evidenze
CQ-EX-01.1Finalità, costrutto e allineamento al framework5 requisiti
- 1. Finalità prevista, contesto decisionale, popolazione target e conseguenze prevedibili dell’uso dei punteggi sono espliciti e sostenuti da un argomento di validità aggiornato.
- 2. Costrutto, dominio d’uso della lingua, abilità, copertura dei contenuti e fonti di varianza irrilevante sono definiti nelle specifiche del test.
- 3. Sviluppatori del test ed esperti sono selezionati rispetto a criteri di competenza documentati e operano secondo procedure verificabili.
- 4. Forme parallele e somministrazioni successive sono costruite su specifiche comuni e verificate per comparabilità di contenuto e difficoltà.
- 5. Ogni relazione dichiarata con il QCER o altro framework è sostenuta da specifiche, familiarizzazione, standardizzazione, standard setting, validazione empirica ed evidenze di manutenzione continua.
- Argomento di validità, specifiche del test, analisi del dominio d’uso, registri degli esperti, studi di comparabilità e rapporto di collegamento al framework.
Le evidenze sono campionate in base a scope, rischio e modello di erogazione; l’elenco non è esaustivo.
CQ-EX-01.2Somministrazione, logistica, sicurezza e accesso5 requisiti
- 6. Centri d’esame e partner di erogazione sono selezionati, autorizzati, formati, monitorati e, quando necessario, sospesi con criteri risk-based.
- 7. Materiali, item bank, dati dei candidati e risultati sono tracciabili e protetti durante creazione, conservazione, trasferimento, uso e distruzione.
- 8. Il personale di somministrazione riceve procedure utilizzabili e supporto; incidenti, interruzioni e deviazioni sono registrati, indagati e risolti coerentemente.
- 9. I controlli su identità, presenza, malpractice, proctoring remoto, risultati e certificati sono proporzionati alla modalità e alle conseguenze del test.
- 10. Gli accomodamenti sono decisi coerentemente, documentati e valutati per rimuovere barriere evitabili senza modificare il costrutto valutato.
- Contratti e monitoraggio dei centri, registri di chain of custody, fascicoli incidenti, decisioni sugli accomodamenti, test di sicurezza e osservazioni della somministrazione.
Le evidenze sono campionate in base a scope, rischio e modello di erogazione; l’elenco non è esaustivo.
CQ-EX-01.3Scoring, rating e grading2 requisiti
- 11. Chiavi di scoring, scoring automatico, controlli amministrativi, cut score e calcolo dei risultati sono verificati per accuratezza e riproducibilità.
- 12. I rater sono formati, standardizzati, autorizzati e monitorati; accordo, severità, drift e performance incoerente determinano azioni definite.
- Specifiche di scoring, registri dei controlli, materiali di standardizzazione, statistiche dei rater, campioni di doppio marking o moderazione e verbali dei cut score.
Le evidenze sono campionate in base a scope, rischio e modello di erogazione; l’elenco non è esaustivo.
CQ-EX-01.4Analisi del test, affidabilità ed equità2 requisiti
- 13. Il titolare analizza risultati di candidati e sottogruppi, riesamina l’impatto differenziale e indaga fonti plausibili di bias o svantaggio ingiusto.
- 14. Performance di item e task, distribuzioni dei punteggi, affidabilità, coerenza delle classificazioni e incertezza di misura sono analizzate con metodi adeguati al test e al campione.
- Difficoltà e discriminazione degli item, analisi di affidabilità o generalizzabilità, errore standard o dati di classificazione, riesame dei sottogruppi e follow-up documentato.
Le evidenze sono campionate in base a scope, rischio e modello di erogazione; l’elenco non è esaustivo.
CQ-EX-01.5Governance, risultati e uso responsabile7 requisiti
- G1. Per il Certi Mark – Examination Body, la governance identifica ruoli responsabili, autorità decisionali, conflitti, requisiti di competenza e supervisione indipendente della qualità.
- G2. Il sistema qualità controlla portfolio degli esami, centri e partner, sicurezza delle informazioni, incidenti, reclami, ricorsi, modifiche e azioni correttive.
- G3. Le conclusioni sull'organizzazione sono sostenute da un campionamento rappresentativo di esami, funzioni, sedi, lingue, livelli e modalità inclusi nello scope.
- 15. I risultati sono emessi entro tempi dichiarati, con canali sicuri di correzione, evidenze decisionali conservate e informazioni comprensibili sul significato dei punteggi.
- 16. Candidati, centri e utilizzatori ricevono informazioni accurate su finalità, contenuto, formato, preparazione, scoring, affidabilità, limiti, accesso, ricorsi e reclami.
- 17. Le indicazioni sull’interpretazione distinguono usi sostenuti dalle evidenze da estrapolazioni non supportate e sono riesaminate quando cambiano test o contesto.
- 18. Il titolare monitora gli usi impropri prevedibili e interviene in modo proporzionato quando i punteggi sono interpretati o applicati contro gli interessi dei candidati o i limiti dichiarati del test.
- Mappe di governance, autorità di ruolo, riesami del portfolio, obiettivi qualità, registri dei rischi, monitoraggio dei centri, log di incidenti e modifiche, reclami, ricorsi ed evidenze delle azioni correttive.
- Dati sui livelli di servizio, campioni di risultati e certificati, guida candidati, guida per gli utilizzatori, reclami e ricorsi, registro degli usi impropri e interventi documentati.
Le evidenze sono campionate in base a scope, rischio e modello di erogazione; l’elenco non è esaustivo.
Indicatori
Come si presenta un'attuazione efficace
- Un’affermazione tecnica è accettata solo quando metodo, dati, limiti e interpretazione responsabile sono verificabili.
- L’audit campiona l’intero ciclo di vita dell’esame e verifica sia il progetto documentato sia l’attuazione operativa.
- Modifiche sostanziali a costrutto, formato, erogazione, scoring, cut score o uso previsto attivano il riesame dell’argomento di validità e dello scope.
- Per il Certi Mark – Examination Body, l’audit campiona governance e sistema qualità su una parte rappresentativa del portfolio di esami e della rete operativa.
- Il Certi Mark – Examination Body non valida, da solo, l’interpretazione dei punteggi o l’allineamento al framework di ogni esame; ciascun prodotto deve essere espressamente incluso nello scope.
Guide Certiqual collegate
Come i requisiti vengono interpretati nella pratica.
Costruire un argomento di validità per un esame
Guida che collega l’interpretazione prevista dei punteggi a progettazione, scoring, evidenze empiriche, conseguenze e manutenzione.
Apri la guidaAllineamento responsabile al QCER
Il protocollo in sette controlli utilizzato per verificare definizione, standard setting, validazione e mantenimento delle dichiarazioni di livello.
Apri la guidaStorico versioni
Le decisioni restano collegate alla loro base.
Versione corrente pubblicata.
Le versioni future saranno aggiunte senza sovrascrivere questo record.
