36
1 * 1 Data-geïnformeerd onderwijs veranderen Opleiders op de Pabo geschoold Promotieonderzoek naar de werking van een datateam in het hogeronderwijs drs. E.D. Bolhuis Promotor: Prof. Dr. J.M. Pieters Co-promotoren: Dr. J.M. Voogt & Dr. K. Schildkamp

130303 promotieonderzoek velon1

Embed Size (px)

DESCRIPTION

Workshop 128 Over data-geïnformeerd veranderen op een pabo

Citation preview

Page 1: 130303 promotieonderzoek velon1

1* 1

Data-geïnformeerd onderwijs veranderenOpleiders op de Pabo geschooldPromotieonderzoek naar de werking van een datateam in het hogeronderwijs

drs. E.D. Bolhuis

Promotor: Prof. Dr. J.M. Pieters

Co-promotoren: Dr. J.M. Voogt & Dr. K.

Schildkamp

Page 2: 130303 promotieonderzoek velon1

2(Her)ontwerp van afstandsonderwijs m.b.v. TPACK

Data wordt in het HO gebruikt ter verantwoording. Voor accreditatie, rendementscijfers, etc.

Datateams in het hogeronderwijs

Naast het verantwoorden, kun je met data:•beslissingen nemen, •professionaliseren •en/of om leren

Promotieonderzoek naar de werking van datateams in het HO.

Page 3: 130303 promotieonderzoek velon1

3

AanleidingOproep in American Journal of Education: Little (2012)112, p. 114: ‘ microprocess studies stand to make a much-needed contribution to a program of research on data use and schoolimprovement.. (these) studies expose aspects of practice that otherwise remain opaque, and further, that these dynamics of practice are likely to prove salient in accounting for the evolving nature and consequences of “data use” in schools and districts’ .

Promotieonderzoek naar de werking van datateams in het HO.

Page 4: 130303 promotieonderzoek velon1

4

Onderzoeksvraag

Hoe functioneert een datateam in het

hoger onderwijs?

Promotieonderzoek naar de werking van datateams in het HO.

Page 5: 130303 promotieonderzoek velon1

5

Deelvragen

1.Welke activiteiten voert een datateam uit?

2.Wat is de relevantie van de gesprekken van het datateam?

3.Wat is diepgang van de gesprekken in het datateam?

4.Welke activiteiten onderneemt een data-coach om het

datateam te ondersteunen in haar functioneren?

Promotieonderzoek naar de werking van datateams in het HO.

Page 6: 130303 promotieonderzoek velon1

6

Theoretisch model

Datateams, Schildkamp

Diepgang / relevantie: Henry

Rol datacoach: Lachat et al, Fieldman

Promotieonderzoek naar de werking van datateams in het HO.

Page 7: 130303 promotieonderzoek velon1

7

Datateams: activiteiten

Promotieonderzoek naar de werking van datateams in het HO.

P

H

D

KA

I&C

M

E

Page 8: 130303 promotieonderzoek velon1

8

Diepgang / relevantie:

Een gesprek heeft depth of inquiry als de gesprekken een

proces weerspiegelen van onderzoek gericht op het

nemen van actie waarbij elke stap kritisch wordt doorlopen

(Inquiry habit of mind; Henry, 2012, p. 83).

Een gesprek is relevant als het gaat over het onderwerp

(Henry, 2012, p. 87).

Promotieonderzoek naar de werking van datateams in het HO.

Page 9: 130303 promotieonderzoek velon1

9

Rol datacoach

Een datacoach:

•Externe coach: cyclisch werken

•Ondersteuning datateam (o.m. in het werken met data)

•Probleem oplossen

•Verantwoordelijk voor het leerklimaat

Promotieonderzoek naar de werking van datateams in het HO.

Page 10: 130303 promotieonderzoek velon1

10

Rol datacoach

Datacoach heeft twee verschillende rollen (Lachat et al,

2005):

•Een faciliterende rol

•Een expertrol.

Promotieonderzoek naar de werking van datateams in het HO.

Page 11: 130303 promotieonderzoek velon1

11

Mixed method research, singlecase

Deelvraag Observatie Interview datateam

Interview datacoach

Logboek Overige materialen

Welke activiteiten voert een datateam uit?

X X X X X

Wat is de relevantie van de gesprekken van het datateam?

X - X X X

Wat is diepgang van de gesprekken in het datateam?

X - X X X

En welke activiteiten onderneemt een data-coach om het datateam te ondersteunen in haar functioneren?

X X X X X

Promotieonderzoek naar de werking van datateams in het HO.

Page 12: 130303 promotieonderzoek velon1

12

Datateam: uitvoering

Promotieonderzoek naar de werking van datateams in het HO.

•Binnen het propedeuseteam van de Pabo;•Gepland: 10 bijeenkomsten, uitvoering 11 bijeenkomsten• 6 teamleden, allen docenten. De manager van het propedeuseteam is af en toe aanwezig•Periode 12 december 2011 tot 3 juli 2012

Page 13: 130303 promotieonderzoek velon1

13

Casus I

Promotieonderzoek naar de werking van datateams in het HO.

Uitval propedeuse 1e jr VT: 48% > terugdringen!Oorzaak uitval:•Vooropleiding•Gender•Reistijd•Binding met de klas en klasgenoten

Data verzamelen middels exit-enquête

Page 14: 130303 promotieonderzoek velon1

14Promotieonderzoek naar de werking van datateams in het HO.

Uitval propedeuse 1e jr VT: 48% > terugdringen!Oorzaak uitval:•Geringe studievaardigheden•Geringe planningsvaardigheden•GAP-vooropleiding - HBO ondanks summercourse

Maatregel:•Studenten volgen en selecteren•Begeleiding studenten in P2

Data:•Studievoortgang•Bevragen SLB-ers

Page 15: 130303 promotieonderzoek velon1

15

Welke activiteiten voert het datateam

uit?

Promotieonderzoek naar de werking van datateams in het HO.

Page 16: 130303 promotieonderzoek velon1

16

Onderwerp bijeenkomsten

Promotieonderzoek naar de werking van datateams in het HO.

Gepland Onderwerp Daadwerkelijk onderwerp

1 Werkwijze datateam en probleemformulering Hypotheses opstellen

2 Probleemformulering en hypothese opstellen Hypothese opstellen

3 Data verzamelen Data verzamelen d.m.v. exit enquête

4 Verzamelde data bespreken Data verzamelen d.m.v. exit enquête

5 Data analyse Data verzamelen d.m.v. exit enquête

6 Interpretatie en conclusie Analyse

7 Maatregelen nemen Interpretatie & conclusie

8 Evaluatie Analyse

9 Reserve Interpretatie & conclusie10 Reserve Maatregelen & evaluatie11 Niet ingepland Maatregelen

Page 17: 130303 promotieonderzoek velon1

17Promotieonderzoek naar de werking van datateams in het HO.

Nr. Daadwerkelijk onderwerp Uitgevoerde activiteiten Aantal malen dat de activiteit is gecodeerd

1 Hypotheses opstellen Introductie op de werkwijze ProbleemdefinitieHypothese opstellenData verzamelen

1191

2 Hypothese opstellen ProbleemdefinitieHypothese Data verzamelen

1114

3 Data verzamelen d.m.v. exit enquête ProbleemdefinitieHypothese opstellenData verzamelenKwaliteit van de dataMaatregelen

13911

4 Data verzamelen d.m.v. exit enquête Data verzamelenKwaliteit dataMaatregelen

1051

Page 18: 130303 promotieonderzoek velon1

18Promotieonderzoek naar de werking van datateams in het HO.

5 Data verzamelen d.m.v. exit enquête Data verzamelenAnalyse

121

6 Analyse ProbleemdefinitieHypothese opstellenData verzamelenAnalyse Maatregelen

61381

7 Interpretatie & conclusie ProbleemdefinitieHypothese opstellenData verzamelenKwaliteit dataAnalyse Interpretatie & conclusie

112147

8 Analyse Hypothese opstellenData verzamelenAnalyse Interpretatie & conclusieMaatregelen

71924

9 Interpretatie & conclusie Interpretatie & conclusieMaatregelen

5410 Maatregelen & evaluatie Maatregelen

Evaluatie65

11 Maatregelen MaatregelenEvaluatie

61

Nr. Daadwerkelijk onderwerp Uitgevoerde activiteiten Aantal malen dat de activiteit is gecodeerd

Page 19: 130303 promotieonderzoek velon1

19Promotieonderzoek naar de werking van datateams in het HO.

P

H

D

K

AI&CM

E

R

R

R

Page 20: 130303 promotieonderzoek velon1

20

R

Page 21: 130303 promotieonderzoek velon1

21

Resultaten: planning

Promotieonderzoek naar de werking van datateams in het HO.

De activiteiten worden grosso modo uitgevoerd zoals in de cirkel beschreven wordt, echter er is:1.Minder aandacht: probleemdefinitie, kwaliteit van de data, analyse, interpretatie & conclusie en de evaluatie;2.Meer aandacht: hypothese, dataverzamelen en maatregelen3.Iteratieve karakter

Page 22: 130303 promotieonderzoek velon1

22

Resultaten: overig

Promotieonderzoek naar de werking van datateams in het HO.

1. Attributie van de hypotheses: van extern naar interne attributie

2. Content knowledge (in dit geval knowledge over de organisatie van het curriculum) speelt een rol;

3. Content vision speelt een rol;4. Misconcepties rondom data.

Page 23: 130303 promotieonderzoek velon1

23

Wat is de relevantie diepgang van de

gesprekken

Promotieonderzoek naar de werking van datateams in het HO.

Page 24: 130303 promotieonderzoek velon1

24

Relevantie gesprekken

Promotieonderzoek naar de werking van datateams in het HO.

Alle gesprekken waren relevant: geen small talk

Page 25: 130303 promotieonderzoek velon1

25

Diepgang

Promotieonderzoek naar de werking van datateams in het HO.

B1 B2 B3 B4 B5 B6 B7 B8 B9 B10 B11 T

Geen diepgang 0,32 0,25 0,15 0,17 0,17 0,17 0,11 0,02 0,02 0,04 0,03 0,12

Enigszins diepgang 0,24 0,38 0,58 0,33 0,2 0,47 0,14 0,18 0,15 0,1 0,03 0,24

Gedeeltelijk diepgang 0,38 0,28 0,18 0,5 0,63 0,28 0,08 0,62 0,43 0,86 0,94 0,49

Veel diepgang 0,06 0,09 0,09 0 0 0,08 0,67 0,18 0,4 0 0 0,15

Page 26: 130303 promotieonderzoek velon1

26

Diepgang

Promotieonderzoek naar de werking van datateams in het HO.

Page 27: 130303 promotieonderzoek velon1

27

Diepgang

Promotieonderzoek naar de werking van datateams in het HO.

B1 B2 B3 B4 B5 B6 B7 B8 B9 B10 B11 T

Geen diepgang 0,32 0,25 0,15 0,17 0,17 0,17 0,11 0,02 0,02 0,04 0,03 0,12

Enigszins diepgang 0,24 0,38 0,58 0,33 0,2 0,47 0,14 0,18 0,15 0,1 0,03 0,24

Gedeeltelijk diepgang 0,38 0,28 0,18 0,5 0,63 0,28 0,08 0,62 0,43 0,86 0,94 0,49

Veel diepgang 0,06 0,09 0,09 0 0 0,08 0,67 0,18 0,4 0 0 0,15

Page 28: 130303 promotieonderzoek velon1

28

Diepgang

Promotieonderzoek naar de werking van datateams in het HO.

Page 29: 130303 promotieonderzoek velon1

29

Verschillen in diepgang: welke activiteiten?

Promotieonderzoek naar de werking van datateams in het HO.

Page 30: 130303 promotieonderzoek velon1

30

Conclusie

Promotieonderzoek naar de werking van datateams in het HO.

1. Een team moet leren diepgaand met elkaar te spreken: naar mate de bijeenkomsten vorderen, meer diepgang.

2. Activiteiten verschillen in diepgang3. Diepgang? Eerst data op tafel..4. Knip na bijeenkomst 3 en 7

Page 31: 130303 promotieonderzoek velon1

31

B1 B2 B3 B4 B5 B6 B7 B8 B9 B10 B11

Expert .86 .47 .49 .61 .00 .29 .69 .52 .61 .04 .09 4.67

Coach .14 .53 .51 .39 1.00 .71 .31 .48 .39 .96 .91 6.33

1.00 1.00 1.00 1.00 1.00 1.00 1.00 1.00 1.00 1.00 1.00

Rol datacoach

Promotieonderzoek naar de werking van datateams in het HO.

Page 32: 130303 promotieonderzoek velon1

32

Diepgang waardoor?

Promotieonderzoek naar de werking van datateams in het HO.

In bijeenkomst 1 en 2 (bijna geheel) door DC, bijeenkomst 7 en 8 geheel door DC en bijeenkomst 10 en 11 niets door DC

Page 33: 130303 promotieonderzoek velon1

33

Conclusie

Promotieonderzoek naar de werking van datateams in het HO.

1. Datacoach is in begin vooral als expert aanwezig en genereerd diepgang

2. Op cruciale momenten als expert aanwezig3. In bijeenkomst 7 en 8 expertrol erg belangrijk:

verkeerde dataverzamelen, data-analyse

Page 34: 130303 promotieonderzoek velon1

34

Meer diepgang door:

Promotieonderzoek naar de werking van datateams in het HO.

1. Een team moet leren diepgaand met elkaar te spreken: naar mate de bijeenkomsten vorderen, meer diepgang.

2. Activiteiten verschillen in diepgang3. Diepgang? Eerst data op tafel..4. Knip na bijeenkomst 3 en 7

Page 35: 130303 promotieonderzoek velon1

35

Discussie

Promotieonderzoek naar de werking van datateams in het HO.

1. Zorg voor zo snel mogelijk data2. Externe geattribueerde hypotheses zijn een

noodzakelijke stap naar intern geattribueerde hypotheses

3. Meet de accuraatheid van data, zelfbevraging levert een vertekend beeld

4. Datacoach moet naast coach ook expert zijn

Page 36: 130303 promotieonderzoek velon1

36

Vragen?

Promotieonderzoek naar de werking van datateams in het HO.

[email protected]@Ebolhuis