La vita del bit di dati: come i dati informano la politica educativa

Qui a Washington STEM, facciamo affidamento su dati disponibili al pubblico. Ma come facciamo a sapere che sono affidabili? In questo blog vedremo come reperiamo e convalidiamo i dati utilizzati nei nostri report e dashboard.

 

I dati sono essenziali. Lo usiamo per fissare obiettivi, monitorare i progressi e identificare le disuguaglianze sistemiche. Potresti pensare che si trovino principalmente nei fogli di calcolo, ma elaboriamo i dati costantemente nella nostra vita quotidiana: Cosa indosserai domani? Meglio controllare le previsioni del tempo. A che ora andrai al lavoro domani? Dipende dai bollettini sul traffico.

A una buona educazione ci aiuta ad affinare il nostro istinto sull’affidabilità di una fonte di dati, come una rivista accademica sottoposta a peer review o un giornale che segue i codici e l’etica del giornalismo. Negli ultimi anni, a sfiducia nel governo e la scienza è aumentata, spesso a causa di una deliberata disinformazione o di una mancanza di comprensione come vengono convalidati i risultati scientifici.

Negli ultimi anni è aumentata la sfiducia nel governo e nella scienza, spesso a causa di una deliberata disinformazione o della mancanza di comprensione di come viene condotta la ricerca scientifica e di come i risultati vengono convalidati attraverso il processo di revisione tra pari.

Qui a Washington STEM, facciamo affidamento su dati disponibili al pubblico. Ma come facciamo a sapere che sono affidabili? In questo blog vedremo come reperiamo e convalidiamo i dati utilizzati nei nostri report e dashboard.

Cominciamo con “Consuela”, un ipotetico datore di lavoro di Spokane…

Si comincia con una telefonata

Il telefono squilla e Consuela nota il prefisso (202) di Washington, DC

"Deve essere l'indagine BLS", pensa, riferendosi al Bureau of Labor Statistics.

Consuela possiede un'impresa di costruzioni a Spokane. Ogni mese lei e decine di migliaia di datori di lavoro come lei provvedono dati su occupazione, produttività, uso della tecnologia e altri argomenti attraverso indagini telefoniche automatizzate (Computer Assisted Telephone Interviewing o CATI). Nel mondo della raccolta dati, Consuela è conosciuta come amministratrice dei dati perché compila e invia dati e collabora con gli analisti dell'agenzia richiedente per confermarne l'accuratezza.

Consuela apre il foglio di calcolo in cui tiene traccia delle nuove assunzioni. Prende il telefono che squilla. UN morso* dei dati sta per nascere.

*un portmanteau (fusione di parole) abbreviazione di “cifra binaria”

Come vengono ottenuti i dati

Milioni di bit di dati provenienti da datori di lavoro e altri partecipanti al sondaggio vengono inseriti in database gestiti da agenzie federali come il Census Bureau degli Stati Uniti e la US Bureau of Labor Statistics, così come agenzie statali come il Dipartimento per la sicurezza dell’occupazione e il Dipartimento del commercio, tra gli altri. Ognuna di queste agenzie dispone di team di analisti di dati che raccolgono dati, puliscono errori (come celle vuote o date formattate in modo errato), li disaggregano, cioè li separano in parti componenti e li rendono anonimi. Quest'ultimo passaggio rimuove qualsiasi informazione identificativa, come nomi o indirizzi, in modo da garantire la privacy dei dati di un individuo.

Washington STEM utilizza set di dati open source (ovvero disponibili al pubblico), da una varietà di fonti statali e federali nel nostro dashboard e strumenti di dati. I nostri strumenti di dati forniscono le ultime ricerche in materia di assistenza e istruzione precoci, istruzione primaria e secondaria e percorsi di carriera per il pubblico in generale, inclusi legislatori, educatori, datori di lavoro, organizzazioni a livello comunitario, in modo che possano capire dove si trovano, prevedere le esigenze future e garantire che il percorso tra istruzione e forza lavoro sia solido.

I nostri strumenti di dati forniscono le ultime ricerche in materia di assistenza e istruzione precoci, istruzione primaria e secondaria e percorsi di carriera per il pubblico in generale, inclusi legislatori, educatori, datori di lavoro, organizzazioni a livello comunitario, in modo che possano capire dove si trovano, prevedere le esigenze future e garantire che il percorso tra istruzione e forza lavoro sia solido.

Dati sull'istruzione a Washington

Ma quando si tratta di rendicontare i risultati dell’istruzione, la spina dorsale del nostro STEM dalla dashboard dei numeri— facciamo affidamento sui dati dell’Education Research Data Center (ERDC), ospitato presso l’Ufficio di gestione finanziaria. Il legislatore ha creato l'ERDC nel 2007 per raccogliere e gestire i dati sull'istruzione di Washington dalla scuola materna all'università/forza lavoro, un insieme di dati longitudinali noto come “P20W”. Quattordici agenzie statali raccolgono questi dati, tra cui l'Ufficio del sovrintendente alla pubblica istruzione (OSPI), il Dipartimento per i bambini, i giovani e le famiglie (DCYF), il Dipartimento della sanità e dei servizi sociali, il Consiglio statale comunitario e degli istituti tecnici e altri.

Gli amministratori dei dati di ciascuna di queste agenzie, proprio come Consuela, sono responsabili della compilazione dei dati dai loro programmi, come l’iscrizione degli studenti e i dati demografici, i punteggi di preparazione in matematica all’asilo e i tassi di conseguimento del diploma. L'amministratore carica quindi i dati sul portale dell'ERDC dove vengono sottoposti a controlli di qualità prima di essere aggiunti a un database principale.

Nel maggio del 2007, il governatore Christine Gregoire ha creato il Consiglio P-20 per monitorare i progressi degli studenti e le transizioni dalla scuola materna all'università. Nello stesso anno, il parlamento ha approvato un disegno di legge per creare l’Education Research Data Center (ERDC), che è stato sottoposto a uno studio dei suoi processi e procedure nel 2023. Washington STEM ha condotto una revisione parallela sulle esigenze degli intermediari di dati. La maggior parte ha affermato di aver bisogno di supporto per poter interagire in modo più efficace con i dati raccolti.

“Riceviamo dati da molte fonti di dati diverse, quindi dobbiamo collegarli nel nostro data warehouse. Di conseguenza, effettuiamo costantemente controlli di convalida e qualità”, ha affermato Bonnie Nelson, specialista senior in governance dei dati presso l’ERDC.

Nelson ha affermato che ciò che rende l’ERDC unico a Washington è che ospita un “data warehouse longitudinale intersettoriale”, il che significa che collega più record di un singolo studente. “Ogni studente genera un record quando va a scuola, all'università e successivamente quando trova un lavoro. L’ERDC mette tutto in un unico documento”.

Da lì, i dati vengono inseriti nelle pubblicazioni dell'ERDC, compresi i rapporti sull'educazione della prima infanzia, sui risultati degli studenti e altri. Nelson ha affermato che i principali utenti dell'ERDC sono i legislatori statali, i decisori politici, le agenzie statali, i ricercatori universitari e le organizzazioni a livello comunitario. L'ERDC ha il compito per legge di rendere i dati disponibili al pubblico tramite dashboard online or su richiesta.

"È nostro compito essere amministratori e connettori: non è per tenere le persone fuori dai dati, ma per dire loro: 'Abbiamo qualcosa che potresti trovare interessante' e aiutarli ad accedere ai dati per migliorare i risultati e le esperienze degli studenti."

L'anno scorso, Washington STEM e partner della rete ha contattato 739 utenti di dati in tutto lo stato, compresi professionisti, educatori, ricercatori, politici, leader e sostenitori della comunità, per chiedere se e come utilizzano i dati e quali sfide hanno dovuto affrontare nel farlo. I risultati mostrano che il 90% utilizza i dati nel processo decisionale e nella pianificazione, ma meno di 20 dei 739 utenti di dati hanno affermato di sentirsi informati sull’infrastruttura dati P20W dello stato o di sapere quale agenzia contattare per le loro domande sui dati. Al fine di migliorare la capacità dei dati, nei prossimi quattro anni Washington STEM fornirà sviluppo professionale e assistenza tecnica per migliorare la capacità di questi partner di interagire con i dati che utilizzano.

gli studenti delle scuole superiori durante la pausa scolastica affollano i corridoi
Il progetto High School to Postsecondary ha aiutato le scuole ad accedere e ad analizzare i dati relativi ai corsi. I risultati hanno mostrato disparità di genere ed etniche nell’iscrizione ai corsi: i maschi latini avevano meno probabilità di iscriversi al doppio credito e di continuare l’istruzione post-secondaria. Credito fotografico: Jenny Jimenez

Le storie che i dati possono raccontare

A Washington STEM non raccogliamo dati e creiamo dashboard solo per divertimento. (Anche se visualizzare i dati è divertente—chiedi semplicemente al nostro data scientist.) Come affermato all'inizio, i dati sono importanti per stabilire obiettivi, misurare i progressi e identificare problemi sistemici.

Ad esempio, cinque anni fa, a coordinatore della carriera e della preparazione universitaria presso una scuola superiore di Yakima aveva la sensazione che l'iscrizione degli studenti ai programmi a doppio credito nella sua scuola - spesso legati a una maggiore probabilità di proseguire l'istruzione superiore - non fosse equa, ma non aveva i dati per dimostrarlo.

Quindi ha contattato Washington STEM per chiedere aiuto nell'accesso e nell'analisi dei dati sui corsi. IL sul risultato hanno mostrato disparità di genere ed etniche: i maschi latini avevano meno probabilità di iscriversi al doppio credito e di continuare l’istruzione post-secondaria.

Il dashboard dei dati sulla necessità e l’offerta di assistenza all’infanzia ha mostrato che su tutte le 37 contee dello Stato di Washington, solo due dispongono di un’offerta di assistenza all’infanzia adeguata a soddisfare il bisogno.

Una volta che gli amministratori scolastici hanno conosciuto i propri dati, sono stati in grado di apportare importanti miglioramenti per aiutare un numero maggiore di studenti ad accedere ai programmi a doppio credito. Nel 2022, i legislatori hanno approvato un disegno di legge che impone a tutte le scuole di farlo segnalare i dati demografici degli studenti nell'iscrizione a doppio credito. Washington STEM continua ad espandere questo programma attraverso la scuola superiore fino alla collaborazione post-secondaria, con oltre 40 scuole in tutto lo stato che stanno iniziando a utilizzare dashboard di dati per visualizzare i propri dati e apportare modifiche a livello scolastico.

Allo stesso modo, prima del Legge Fair Start for Kids è stato approvato nel 2021, i dati sulla necessità e sull’offerta di assistenza all’infanzia non erano prontamente disponibili al pubblico. Min Hwangbo, Direttore dell’Impatto STEM di Washington, ha dichiarato: “La nuova legge impone una maggiore trasparenza dei dati. Di conseguenza, il Dipartimento per l’infanzia, la gioventù e le famiglie ha collaborato con Washington STEM per crearne cinque Dashboard di Early Learning che forniscono un’ampia visione del settore.”

“Nel complesso, mancano dati coerenti e accurati su diverse popolazioni chiave: bambini con disabilità, bambini senza casa e bambini nativi americani”.

-Min Hwangbo, Direttore dell'Impatto STEM di Washington

Nonostante i cruscotti Early Learning e la condizione dei bambini cruscotto dati ed rapporti regionali hanno aumentato la disponibilità dei dati, ma non è successo per tutti i bambini.

“Manca una rendicontazione coerente e accurata dei dati per diverse popolazioni chiave: bambini con disabilità, bambini senza casa e bambini nativi americani”, ha affermato Hwangbo. Ha detto che ciò è dovuto al fatto che la raccolta di dati nel settore dell’assistenza all’infanzia era volontaria e durante la pandemia semplicemente non è avvenuta in alcune regioni dello stato. Durante Processo di co-progettazione di State of the Children, Washington STEM ha esaminato i set di dati con i membri di ciascuna di queste comunità e molti di loro hanno affermato che i numeri sembravano sottostimati.

Richiede un centro di raccolta dati per l'apprendimento precoce

Sebbene agenzie come ERDC, DCYF e OSPI raccolgano alcuni dati sui bambini in età prescolare, attualmente non esiste un centro di raccolta dati centrale per dati completi sull’apprendimento precoce a livello di popolazione. Hwangbo ha affermato: “L’attuale infrastruttura di dati in vari programmi e organizzazioni rende difficile per le famiglie accedere al supporto di cui hanno bisogno e difficile per gli amministratori utilizzare i dati per migliorare il sostegno ai bambini e alle famiglie”.

Washington STEM raccomanda di creare un centro di raccolta dati a livello statale per migliorare l’accesso ai dati in modo che tutti – legislatori, educatori, ricercatori, genitori – possano avere ciò di cui hanno bisogno per pianificare e migliorare il nostro sistema di assistenza precoce e istruzione.

Washington STEM raccomanda di creare un centro di raccolta dati a livello statale per migliorare l’accesso ai dati in modo che tutti – legislatori, educatori, ricercatori, genitori – possano avere ciò di cui hanno bisogno per pianificare e migliorare il nostro sistema di assistenza precoce e istruzione.

Quindi, che tu sia un fanatico dei dati o che tu ti avvicini per la prima volta al mondo dei dati, ti invitiamo a utilizzare Strumenti dati di Washington STEM. E la prossima volta che ascolti i rapporti economici al telegiornale del mattino, pensa a Consuela e agli altri amministratori di dati che stanno dietro a quei numeri.

 
 

"Quale strumento di dati STEM di Washington dovrei utilizzare?"

 

 
Le
BLS – Ufficio statunitense di statistica del lavoro
Censimento – Ufficio censimento degli Stati Uniti
CCA – Assistenza all’infanzia consapevole
COMMS – Dipartimento del Commercio dello Stato di Washington
DCFY – Dipartimento dei bambini, dei giovani e delle famiglie dello Stato di Washington
ECEAP — Programma di assistenza all'istruzione della prima infanzia
ERDC – Dipartimento per la sicurezza dell’occupazione dello Stato di Washington
OFM — Ufficio di Gestione Finanziaria
OSPI — Ufficio del Sovrintendente alla Pubblica Istruzione