Observasjon · Strukturert observasjon, eks observasjonsskjema for for ADHD i hht DSM-5 Symptoms of inattention Symptoms of hyperactivity and impulsivity Often fails to give close

Observasjon i utdanningsforskning

Ingrid R. Christensen

Førsteamanuensis pedagogikk

Høgskolen i Sørøst-Norge

09.06.2017Ingrid Reite Christensen Kvalitativ observasjon i

utdanningsforskning

Hva er observasjon?

• Del 1: Ulike former for observasjon i utdanningsforskning• Ulike forskningstradisjoner. Mellom

positivisme og konstruktivisme• Ulike metodologiske ”disipliner”: Etnografi,

sosiologi, aksjonsforskning• Kvantitative og kvalitative• Kvalitativ observasjon – ulike former

• Del 2: Framgangsmåter og praktiske dilemma

• Del 3: Kvalitet på observasjon i utdanningsforskning• Validitet, reliabilitet i kvalitativ observasjon

– en oversikt• Hva er deltakelse ved deltakende

observasjon?


utdanningsforskning

Ut og stjæle jord!


utdanningsforskning

Case 1: Observasjon av profesjonslæring hos prester

• Overordnet ramme: Utvikling av teori om profesjonslæring

• Sammenlikning med profesjonslæring hos lærere

• Utvalg: 6 prester i Den norske kirke

• Metode: Skygging av prester.

• 3 faser (intervju, skygging – totalt ca. 3 mnd og intervju)

• Teoretisk vinkling: Sosiokulturell/sosiomateriell tilnærming til læring


utdanningsforskning

Case 2: Tverrfaglig arbeid for ungdom med kort botid

• Hva kjennetegner tverrfaglig arbeid for mestring hos ungdom med kort botid? Fokus på psykososial helse og mestring og hvordan tverrfaglige team legger til rette for dette.

• Ungdom med kort botid i videregående skole, yrkesrettede studieprogram (TIP, H&O, B&A)

• Pilot: Observasjon av 12 tverrfaglige møter (4 på hvert program)

• Mestring i lys av Antonovsky (2004): Opplevelse av sammenheng (å gjøre håndterbar, meningsfull, forståelig)


utdanningsforskning

Øyet som ser og øyet som vurderer

Positivisme Sosialkonstruktivisme


utdanningsforskning

Observasjon i utdanningsforskning: Komplekst felt

Grader av teoristyring. Sosiologi, aksjonsforskning og etnografi

Grader av empirisk kompleksitet. Hva som foregår i et avgrenset tid/rom og multi-sited ethnography(Marcus, 1995, 1998).


utdanningsforskning

Ulike deltakelser

• Ikke-deltakende

• Deltakende observasjon

• Perifer til fullverdig medlem


utdanningsforskning

Ulike former for kvalitativ observasjon

StrukturertSemi-

strukturertEtnografi, skygging


utdanningsforskning

Strukturert observasjon, eks observasjonsskjema for for ADHD i hht DSM-5

Symptoms of inattention Symptoms of hyperactivity and impulsivity

Often fails to give close attention to detail or makes mistakes Often fidgets with or taps hands and feet, or squirms in seat

Often has difficulty sustaining attention in tasks or activities Often leaves seat in situations when remaining seated is expected

Often does not seem to listen when spoken to directlyOften runs and climbs in situations where it is inappropriate (in adolescents or adults, may be limited to feeling restless)

Often does not follow through on instructions and fails to finish schoolwork or workplace duties

Often unable to play or engage in leisure activities quietly

Often has difficulty organising tasks and activities Is often ‘on the go’, acting as if ‘driven by a motor’

Often avoids, dislikes or is reluctant to engage in tasks that require sustained mental effort

Often talks excessively

Often loses things necessary for tasks or activities Often blurts out answers before a question has been completed

Is easily distracted by extraneous stimuli Often has difficulty waiting their turn

Is often forgetful in daily activities Often interrupts or intrudes on others


utdanningsforskning

Etnografisk skygging

• Etnografisk teknikk: Å følge noen eller noe i dets naturlige miljø.

• Å følge personer lærere, prester.

• Å følge infrastruktur: Å ta samme t-bane, observere hvem og hva som foregår

• Å følge folk Ting: Historien til et juletre, en ipad i skolen osv.

• Bidrar til “rich, dense and comprehensive data set which gives a detailed, first hand and multidimensional picture” of what is studied(McDonald 2005:4).


utdanningsforskning

Semi-strukturert

observasjon

Observasjonsguide tverrfaglig arbeidMestring sett som forståelighet, håndgripelighet og meningsfullhet (Antonovsky 2004).

• Forståelighet (Hode)

• Håndgripelighet (Hender).

• Meningsfullhet (hjerte)


utdanningsforskning

Praktisk• Å få tilgang

• Fokus for observasjon


utdanningsforskning

Spørsmål • Hva er det å få tilgang? Praktiske erfaringer, gode erfaringer?


utdanningsforskning

Å få tilgang• Hva innebærer tilgang?

• Infoskriv/samtykke

• NSD


utdanningsforskning

Å få tilgang – også en prosess


utdanningsforskning

Å velge ut fokus for

observasjon

• Hva skal man velge som fokus?

• Hva kjennetegner tverrfaglig arbeid

• Teoretisk enhet (mestring)

• Empirisk enhet (tverrfaglige aktørers samhandling)


utdanningsforskning

Å skape datamateriale

Hvordan ta notater? Lydopptak – i hvilke situasjoner er dette greit? Sensitive tema og sensitive opplysninger (Corbinog Morse 2003)


utdanningsforskning

Kvalitativ og kvantitativ forskning om validitet og reliabilitet


utdanningsforskning

Validitet: GyldighetKvantitativ forskning1) Intern validitetbegrepsvaliditet. Måler man det man vil måle? 2) Ekstern validitet: For hvem er resultatene gyldige? Kvantitativ forskning fokuserer på statistisk generalisering

Kvalitativ forskning

1. Intern validitet. 1. Begrepsvaliditet. Å skape begreper

som kan korrespondere med erfart praksis (praksis, teori, tidligere forskning)

2. Analytisk generalisering.

2. Ekstern validitet1. Å skape teori/abstraksjoner2. Om funn skaper gjenkjennelse i

liknende case/situasjoner/empiriske felt


utdanningsforskning

Reliabilitet/pålitelighet i forskning

• Kvantitativ forskning• Å kunne gjenta undersøkelse med

like resultater

• Troverdighet i prosedyrer

• Kvalitativ forskning• Undersøkelser kan ikke gjentas.

• Vekt på prosedyrer.


utdanningsforskning

Er det paralleller, eller må man rett og slett bytte ut begrepene validitet og reliabilitet?


utdanningsforskning

Hvordan vurdere

kvaliteten på

observasjoner ut fra

dette?

Paradigmer Eks. Yin (1994) Eks. Denzin and Lincoln og Lincoln and Guba

Eks. Miles og Huberman

Positivisme BegrepsvaliditetIntern validitetEkstern validitetReliabilitet

BegrepsvaliditetIntern validitetEkstern validitetReliabilitet

BegrepsvaliditetIntern validitetEkstern validitetReliabilitetObjektivitet, nøytralitet

Realisme Yin (1994:32): CredibilityTransferabilityDependabilityConfirmabilityDependability

D og L og D&G bruker post-positivisme

CredibilityTransferabilityDependabilityConfirmability

Kritisk teori og konstruktivisme

CredibilityTransferabilityDependabilityConfirmability


utdanningsforskning

Alternativet for

sosiokulturelle/s.konstruktivi

sme: Fire kvalitetstester

(Lincoln and Guba)

• confirmability

• Credibility

• Transferability

• dependability


utdanningsforskning

Confirmability (jf. Nøytralitet

og objektivitet)

• Fortolkning av data gjøres på en logisk og ikke forhåndsdømmende måte

• Er metoder og prosedyrer beskrevet i detalj?

• Er det en generell opplevelse at man har hele bildet og ”backstage” opplysninger?

• Er rådata tilgjengelig for ny analyse?


utdanningsforskning

Credibility -troverdighet

• Parallell til intern validitet

• At data fortolkes på en sannsynlig måte/godt begrunnet måte

• Test:

• Hvor tykke er beskrivelsene?

• Er funnene samsvarende/koherente?

• Henger teoretiske begreper sammen?


utdanningsforskning

Transferability -

overførbarhet

• Generalisering – ”analytisk” (Flyvbjerg)

• Er funnene tykke nok for at de kan være gyldige i andre situasjoner? Gjenkjenbarhet

• Er funnene i tråd med – eller i dialog med tidligere teori?


utdanningsforskning

Dependability

• Indikatorer for stabilitet og konsistens i forskningsprosess.

• Er forskningsspørsmål klare?

• Er forskningsdesignet helhetlig?

• Har man utført prosessen med varsomhet og troverdighet?


utdanningsforskning

Resultatene fra

observasjon: Mellom fakta

og forsker

• Resultatet som skrives fram

• Hva er forskerens oppgave? Å organisere/strukturere virkelighet vs. konstruere og ”bryte opp” virkeligheten

• Kroppen som subjekt og objekt (Mol and Law 2004)

• Resultater blir produsert når de nedtegnes og argumenteres fram (Law 2007)

• Sosiale kulturer etablerer forskningspraksiser og hva som regnes som resultater (deLaet 2012)


utdanningsforskning

Deltakende observasjon-foranderlige

og komplekse deltakelser

Cunliffe og Karunanayake (2013) foreslår at forskeren stadig beveger seg mellom fire ulike forhandlingsrom:

1) Insider/outsider: I hvilken grad kjenner forskeren feltet?

2) Sameness/difference. I hvilken grad forskeren forhandler kulturelle forskjeller – rådgiver eller en som lærer? Status og grad av symmetri

3) Engasjement/distanse

4) Activism/neutrality: Normativitet og aksjer – i hvilken grad er de eksplisitte?


utdanningsforskning

Anbefalte artikler om teori og observasjon

• Hammersley, M. 1990. What's wrong with ethnography: The myth oftheoretical description. Sociology 24(4): 597-615.

• Stanley, L. 1990. Doing ethnography, writing ethnography: A commenton Hammersley. Sociology 24(4): 617-627.

• Loseke, D. R., and S. E. Cahill. 1999. Reflections on classifyingethnographic reflections at the millennium's turn. Journal ofContemporary Ethnography 28(5): 437-441.

• Hine, Christine. "Multi-Sited Ethnography as a Middle Range Methodology for Contemporary Sts." Science, Technology, & Human Values 32, no. 6 (2007): 652-71.


utdanningsforskning

Etnografi

• Marcus, G. 1995. Ethnography in/of the world system: The emergenceof multi-sited ethnography. Annual Review of Anthropology 24: 95-117.Marcus, G. 1998. Ethnography through thick and thin. Princeton: Princeton University Press.


utdanningsforskning

Annen litteratur i presentasjon

• Riege, Andreas. "Validity and Reliability Tests in Case Study Research: A Literature Reivew with «Hands-on» Applications for Each Research Phase." Qualitative Market Research 6, no. 2 (2003).

• Law, John. After Method. A Mess in Social Science. London and New York: Routhledge, 2004.

• Corbin, J., and J.M. Morse. "The Unstructured Interactive Interview: Issues of Reciprocity and Risks When Dealing with Sensitive Topics.". Qualitative Inquiry 9, no. 3 (2003): 335-54.


utdanningsforskning

Documents

Observasjon · Strukturert observasjon, eks observasjonsskjema for for ADHD i hht DSM-5 Symptoms of inattention Symptoms of hyperactivity and impulsivity Often fails to give close