Studio 1
Solomon e colleghi (1988) hanno esaminato l’impatto del programma Caring School Community (CSC) sui bambini delle scuole elementari nella scuola materna fino alla quarta elementare in una baia di San Francisco (California.)- area suburbana school district utilizzando un design quasi sperimentale. I ricercatori hanno diviso sei scuole all’interno del distretto in due gruppi approssimativamente equivalenti di tre sulla base delle dimensioni, dell’esperienza della facoltà, delle caratteristiche sociodemografiche, dei livelli di realizzazione e dell’interesse di partecipazione. Uno di questi gruppi è stato selezionato casualmente per ricevere il programma, mentre l’altro è servito come gruppo di confronto.
La valutazione ha esaminato un totale di 67 aule, tra cui 37 aule nel gruppo di trattamento e 30 aule nel gruppo di confronto. CSC è stato fornito ai bambini in due coorti, ognuna delle quali ha iniziato il progetto nella scuola materna—la prima coorte ha ricevuto CSC nell’anno scolastico 1982-83 e la seconda coorte ha ricevuto CSC nell’anno scolastico 1985-86. Ogni coorte nelle scuole del programma e la coorte parallela nelle scuole di confronto hanno partecipato alle stesse attività di raccolta dati ogni anno. La valutazione si è concentrata sui risultati della prima coorte.
Le valutazioni delle pratiche in classe, delle attività e dei comportamenti degli studenti sono state condotte utilizzando questionari per insegnanti, interviste individuali agli studenti di terza elementare, attività strutturate in piccoli gruppi e osservazioni in classe. Sono stati inoltre sviluppati e utilizzati uno strumento per il sistema di segnaletica e uno strumento per il sistema di classificazione. Gli osservatori hanno utilizzato il sistema di segni dopo aver visto l’aula per un periodo di 2 minuti, mentre un sistema di classificazione è stato utilizzato dopo il completamento di una visita di osservazione di 2 ore. Dopo il primo anno di utilizzo (1982-83), gli strumenti sono stati rivisti.
L’intervento è durato 5 anni, con 350 studenti nella prima coorte e 165 studenti rimasti per la valutazione completa (circa metà nel gruppo di trattamento e metà nel gruppo di controllo). In ciascuno dei 5 anni di valutazione, tutte le aule sono state osservate durante otto visite separate di 2 ore. Gli osservatori in classe sono stati formati e non sono a conoscenza dello stato (trattamento o confronto) di nessuna delle scuole.
C’erano alcune limitazioni allo studio. Gli strumenti di osservazione sono stati modificati dopo il primo anno. Altre limitazioni includono interferenze multiple di trattamento, test invadenti, tendenze secolari ed eventi intermedi. Infine, sono stati utilizzati studenti di scuole diverse, ma non sono state fornite informazioni su altre iniziative o attività in nessuna di queste scuole che potrebbero influenzare i comportamenti di esito.
Studio 2
Battistich e colleghi (2000) hanno condotto uno studio quasi-sperimentale del programma CSC utilizzando un campione di convenienza da sei distretti scolastici per un totale di 24 scuole elementari. Delle scuole, 12 erano situate sulla costa occidentale, 4 erano nel sud, 4 erano nel sud-est e 4 erano nel nord-est degli Stati Uniti. Includono distretti scolastici urbani, suburbani e rurali e servono popolazioni diverse ma approssimativamente equivalenti.
Dodici scuole sono state selezionate per ricevere l’intervento sulla base dell’interesse della facoltà e della probabilità percepita di essere in grado di attuare il programma CSC. Dodici scuole di confronto sono state abbinate alle scuole di intervento sulle dimensioni della scuola e sulle caratteristiche degli studenti. Un totale di 5.500 studenti sono stati inclusi nella loro valutazione: 2.250 studenti nel gruppo di trattamento e 2.250 studenti nel gruppo di confronto. Le valutazioni sono state completate alla base durante l’anno scolastico 1991-92 prima dell’introduzione del programma CSC. I ricercatori hanno utilizzato un periodo di follow-up di 36 mesi.
I self-report degli studenti sono stati utilizzati per misurare i risultati. Le valutazioni dell’uso di droghe e di altri comportamenti problematici (incluso l’uso da parte degli studenti di sigarette, alcol e marijuana e la frequenza di coinvolgimento in comportamenti delinquenziali) erano limitate agli studenti della quinta o sesta elementare in ciascuna delle scuole. Il senso della scuola come comunità degli studenti è stato anche misurato esaminando i livelli di autonomia e influenza degli studenti in classe, il sostegno in classe e il sostegno scolastico. Sono state apportate modifiche per genere, etnia e grado.
Durante lo studio sono state condotte osservazioni in aula da parte di osservatori ciechi all’assegnazione di gruppo. A partire dall’anno di riferimento, sono state condotte ogni anno quattro osservazioni di 90 minuti di ciascuna classe del programma e delle scuole di confronto. Tutti gli osservatori sono stati formati dallo stesso membro dello staff del progetto; gli osservatori hanno registrato videocassette delle interazioni in classe e delle visite di formazione durante l’anno scolastico per mantenere l’affidabilità. L’accordo medio complessivo degli osservatori con i punteggi dei criteri è stato del 75% su tutti i 4 anni dello studio.
Gli effetti del programma su tutte le misure sono stati esaminati utilizzando i contrasti pianificati confrontando i cambiamenti lineari dalla linea di base al programma e le scuole di confronto abbinate (confronti tra gruppi). È stata utilizzata l’analisi multivariata della covarianza, seguita dai contrasti pianificati univariati. Sono state condotte anche due serie di analisi per i dati sul comportamento problematico: un’analisi a livello di studio per includere tutte le scuole 24 e un’analisi ad alto cambiamento che includeva cinque scuole ad alto cambiamento (scuole con alti livelli di implementazione) e le loro cinque scuole di confronto abbinate.