L'effet de tests standardises

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20121Leffet de testing sur les rsultats scolaires : 1910-2010Richard P. PHELPS

1 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20122Meta-analyssUne mthode pour rsumer une littrature de recherche importante, avec une mesure unique et comparable.

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20123L'effet de tests standardiss sur les rsultats scolaires des lvestude de 12 ans

analys a peu pr de 700 tudes unique, et plus de 1500 effets unique

2000 autres tudes taient pass en revue mais pas inclus (juges inappropris dinclure)

centaines autres ne passeront pas en revue il ny a pas assez de temps ou dargent

3 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20124Chercher les tudes dinclure dans la mta-analyseOn a inclus les tudes quont trouv en effet dun test sur les rsultats scolaires des lves ou sur les enseignements des enseigneurs

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20125tudes inclus dans la mta-analysequand:

Un test est introduit de nouveau ou est enlevLa quantit de testing est augment ou est diminuConsquences dun test sont introduit ou sont enlev

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20126tudes inclus dans la mta-analyse

3. plus les mta-analyse dautres chercheurs (e.g.)Kulik, Kulik, Bangert-Drowns, & Schwalb (1983-1991) propos de:testing pour obtenir le dessus sur le sujet, >frquence de testing, et programmes des tudiants universitaire redoublBasol & Johanson (2009) propos du frquence de testingJaekyung Lee (2007) propos des administrations trs grandes W.J. Haynie (2007) propos de la formation

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20127Nombre dtudes et deffets, par type de mthodologieType de mthodologieNombre dtudesNombre deffetsQuantitatives177640Enqutes et sondages dopinion (EUA et Canada)247813Qualitatives245245TOTAL6691698 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20128Taille deffet: d de Cohen

d = (YE - YC) / Spool

YE = moyenne du groupe exprimentalYC = moyenne du groupe contrlSpool = dviation standardis 8 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 20129Taille deffet: Autres formules

d = t*((n1+n2/n1*n2)^0,5

d = 2r/(1-r)^0,5

d = (YE avant-YE aprs-YC avant+YC aprs)/Spool aprs9 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201210Taille deffet: Interprtation

d entre 0,25 et 0,50 un effet faible

d entre 0,50 et 0,75 un effet moyen

d plus de 0,75 un effet fort 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201211tudes quantitatives

(population couverture 7 million personnes )

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201212tudes quantitatives : Taille deffetTaille deffet calcul > :

d +0,55 un effet moyen

Taille deffet squelettique rgl pour la fiabilit (a cause de lerreur qui rsulte du procs quand on mesure)

d +0,70 un effet assez fort

Taille deffet par chercheur

d +0,88 un effet fort

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201213Modrateurs important Group de Traitement (par contre le group de contrle)Taille deffet moyenconnaissant de performance+0,98a enseignement spcialis (e.g., tuteurs)+0,96 consquences de test plus fortes+0,87testing est plus frquent +0,85 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201214Modrateurs Origine de testingNombre dtudesTaille deffet moyenChercheur ou Professeur870,93National240,87Commercial380,82Rgional110,72Total160 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201215Modrateurs Patronage de testNombre dtudesTaille dEffet moyenInternational51,02Local990,93National450,81Rgional110,64Total160 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201216Modrateurs Dsigne dtudeNombre dtudesTaille deffet moyenPr-post120,97Exprience, Quasi-exprience1070,94Multi variance260,80Exprience, post test70,60Pr-post (avec test parallle)80,58Total160 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201217Modrateurs Taille dtudeNombre dtudesTaille deffet moyenAgrget91,60Taille petite1180,91Taille grande330,57Total160 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201218Modrateurs Taille dadministrationNombre dtudesTaille deffet moyenSalle de classe1150,95Taille moyenne60,72Taille grande390,71Total160 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201219Enqutes et sondages dopinion

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201220Pourcentage ditems denqute, par groupe de rpondeur et type denqute

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201221Nombre et pourcentage darticles denqute,par consquence de test et le groupe affectConsquenceNombre%Groupe affectNombre%forte50762Elves39346moyenne18423coles28133faible334Enseigneurs11614pas connu8911pas de consquence647TOTAL813TOTAL854

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201222 Sondages dopinion, par an 244 entre 1958 et 2008, aux tats-Unis et en Canada 813 combinaisons uniques de question-rponse. a peut pr 700.000 rponses uniques dindividuels

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201223Enqutes et sondages dopinion : Tests standardiss simples et tests de performanceTests simples (N 125)Tests de performance (N 50)Lopinion des rpondantsddConnaissance des lves est amlior1,21,0pondre par la population de ltude1,90,5Enseignement est amlior1,01,4pondre par la population de ltude0,90,9Tests aligne le programme scolaire1,01,0pondre par la population de ltude0,50,9 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201224tudes qualitatives : Rsum

(On ne peut pas calculer un taille deffet)

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201225tudes qualitatives, par mthodologieMthode de rechercheNombre dtudes%Dossiers12043Exprimentes ou comparaisons avant-aprs217Entrevues (individu ou groupe)7527Journaux 21Revues des rapports officiels, enregistrements3312Revues des recherches83Enqutes228TUDES TOTAL281100

2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201226tudes qualitatives: L'effet sur les rsultats scolaires des lvesDirection deffetNombre d tudesPourcentage dtudesPourcentage pas infrPositive2048493Positive infr2410Mlang522Pas de change834Ngative311TUDES TOTAL244100100244 tudes menes depuis 100 ans aux plus de 30 pays 2012, Richard P PHELPS

Association Mondiale des Sciences d'Education, 17th Congres, Reims, June, 201227tudes qualitatives : Le testing amliore les rsultats scolaires et lenseignementConnaissance est amlior Nombre dtudes%Oui20095Rsultats mlangs1