Bildungsportale in der Wissenschaft: Qualität oder Qual? Qualitätskriterien und Empirische Befunde zur Nutzung des Deutschen Bildungsservers Konzepte

Bildungsportale in der Wissenschaft: Qualität oder Qual?

Qualitätskriterien und Empirische Befunde zur Nutzung des Deutschen Bildungsservers

Konzepte

Empirische Befunde

Weitere Arbeitsschritte

Dr. Elke Brenstein, Dr. Olaf KosAbteilung für Pädagogik und Informatik

Humboldt Universität zu Berlin

11.02.03 Osnabrück, IuK 2003 2

Wie können wir mehr Menschen mit mehr Informationen versorgen, schnell und in verschiedenen Formen?

Forscher haben hundert Jahre an dem Problem gearbeitet. Und die wunderbare Nachricht ist, dass sie es tatsachlich gelöst haben – bravo!

Nur ist dabei ein neues Problem entstanden: Jetzt wissen die Menschen nicht, was sie mit all den Informationen anfangen sollen....

Neil Postman, 1996

Ein altes Problem...Ein altes Problem...


ÜbersichtÜbersicht

• Qualitätskriterien• Der Deutsche Bildungsserver• Fragestellungen und

Evaluationskonzept • Logfile Analysen

– Unterschiede zwischen Gesamtnutzern & Nutzern aus Hochschule und Forschung

• Ausblick


QualitätskriterienQualitätskriterien1. Der erste Eindruck1. Der erste Eindruck

• Schnelle Ladezeiten

• Ansprechendes, grafisches Design– Farbgebung– Grafische Elemente– Seitenaufbau http://www.vu-bb.de/ http://www.math-net.de/ http://www.medien-bildung.net/


QualitätskriterienQualitätskriterien2. Inhalte2. Inhalte

• Aktualität und Seriosität– Automatische Linküberprüfung– Redaktionelle Pflege

• Übersichtliche Gliederung und Navigation– Tiefennavigation, Sitemap

• Transparenz der Angebote http://www.bildungsportal-sachsen.de/

http://www.zum.de


QualitätskriterienQualitätskriterien3. Funktionsfähigkeit3. Funktionsfähigkeit

• Einwandfreie Funktion des Auftritts mit verschiedenen Browsern

• Barrierefreiheit• Suchfunktion

– Einfache Suche, Expertensuche, Volltextsuche

• Zusatzfunktionen– Druckversion– Seite als Email verschicken

– Newsletter Abonnement


Der Deutsche BildungsserverDer Deutsche Bildungsserver


Entwicklung 1997-2002Entwicklung 1997-2002

DBS: Monatliche Seitenabrufe 1997 - 2002

0

200000

400000

600000

800000

1000000

Jan97

Jul97

Jan98

Jul98

Jan99

Jul99

Jan00

Jul00

Jan01

Jul01

Jan02

Jul02

Jan03

Zugriffe pro Monat Gleitender Durchschnitt der letzten 12 Monate


FragestellungenFragestellungen

• Wer sind die Nutzer des DBS?Wer sind die Nutzer des DBS?Demografische Merkmale, Nutzergruppen

• Welche Informationen suchen die Nutzer? • Wie bewerten Nutzer das Angebot?

Inhalt, Design, Gebrauchstauglichkeit, Funktionalität

• Wie wird der DBS genutzt?– Nutzungshäufigkeiten, – Domänen & Organisationen– Browser und Betriebssysteme, – Referrer– Am häufigsten besuchte Seiten

11.02.03 Osnabrück, IuK 2003 10

EvaluationskonzeptEvaluationskonzept

Logfile Analysen

Nutzer

Marktanalyse

Nicht-Nutzer

Archivdaten

Email-Anfragen

Allg. Online Befragung

Befragungen

Usability Testing

Untersuchungen

Fokusgruppen-Interviews

Experteninterviews

OB Schule

OB Hochschule

OB Weiterbildung

OB Berufliche BildungNavigationsstudien

Feedback

On

lin

e

Pan

el

11.02.03 Osnabrück, IuK 2003 11

EvaluationskonzeptEvaluationskonzept

Logfile Analysen

Nutzer

Marktanalyse

Nicht-Nutzer

Archivdaten

Email-Anfragen

Allg. Online Befragung

Befragungen

Usability Testing

Untersuchungen

Fokusgruppen-Interviews

Experteninterviews

OB Schule

OB Hochschule

OB Weiterbildung

OB Berufliche BildungNavigationsstudien

Feedback

On

lin

e

Pan

el

11.02.03 Osnabrück, IuK 2003 12

2

13

15

34

35

39

41

62

67

93

119

0 20 40 60 80 100 120 140

Auszubildende(r)

Ausbilder(in)

Lernende(r) in der Weiter- und Erwachsenenbildung

Eltern

Hochschullehrer(in)

Schüler(in)

Student(in)

Lehrende(r) in der Weiter- und Erwachsenenbildung

Bildungsadministrator(in) oder -manager(in)

Wissenschaftler(in)

Lehrer(in)

OB

Wer sind die Nutzer des Wer sind die Nutzer des DBS?DBS?Nutzergruppen

11.02.03 Osnabrück, IuK 2003 13

BewertungBewertung Spontaner Eindruck

0%

5%

10%

15%

gefällt mir sehr gut gefällt mir überhaupt nichtErstnutzer

Mehrfachnutzer

• Überwiegend positive Bewertung

• kaum Unterschiede zwischen Erst- und Mehrfachnutzern

OB

11.02.03 Osnabrück, IuK 2003 14

Wie wichtig sind folgende Eigen-schaften einer Website?

0% 20% 40% 60% 80% 100%

Layout & Design

Inhalt

Benutzerführung

Aktualität

Ladezeiten

sehr wichtig

wichtig

unentschieden

unwichtig

völlig unwichtig

OB

11.02.03 Osnabrück, IuK 2003 15

Wie beurteilen Sie den DBS?

0% 20% 40% 60% 80% 100%

Layout & Design

Inhalt

Benutzerführung

Aktualität

Ladezeiten

sehr gut

gut

OK

schlecht

sehr schlecht

weiß nicht

OB

11.02.03 Osnabrück, IuK 2003 16

Was finden Sie gut/weniger gut?

• Positive Anmerkungen:Inhaltliche Fülle

Aktualität und Qualität der Inhalte

Struktur der Website

• Kritikpunkte:Usability u.a. Aspekte der Suche

Design/Layout

UB

11.02.03 Osnabrück, IuK 2003 17

Logfile AnalysenLogfile Analysen

• Tools– Analog http://www.analog.cx – Report Magic

• Datenbasis: – Webserver Logs von Okt. 01 bis Sept. 02

• Stichproben:– Alle DBS Nutzer– Nutzer aus Hochschule und Forschung

11.02.03 Osnabrück, IuK 2003 18

NutzungsanteileNutzungsanteileHochschule & ForschungHochschule & Forschung

Anteil der Nutzer aus Universitäten und

Forschungsinstituten

94%6%

Anfragen unterschiedlicher

Seiten

83%17%

Anzahl verschiedener Hosts

96%4%

11.02.03 Osnabrück, IuK 2003 19

Wöchentliche NutzungWöchentliche Nutzung

Gesamt

Unis & Institute

11.02.03 Osnabrück, IuK 2003 20LF

DBS Gesamt

82%

15%2% 1%

Hochschule & Forschungsinstitute

51%48%

1%

MSIE

Netscape

Netscape (compatible)

Opera

- IE Explorer: MSIE 5: 75 % MSIE 6: 25 %

- Netscape: Netscape 4.x: 90%

BrowserverteilungBrowserverteilung

11.02.03 Osnabrück, IuK 2003 21LF

Hochschule & Forschungsinstitute

2% 4%5%

89%

Windows

Unix

Macintosh

unbekanntesBetriebsystem

DBS Gesamt

9%

1%

2%

88%

BetriebssystemeBetriebssysteme

11.02.03 Osnabrück, IuK 2003 22

OrganisationenOrganisationenDBS NutzerDBS Nutzer

t-dialin.net

aol.com

pppool.de

belwue.de

t-online.de

t-ipconnect.de

mediaways.net

arcor-ip.netmcbone.net

uunet.de

11.02.03 Osnabrück, IuK 2003 23

Unis & Unis & ForschungForschung

0 5000 10000 15000 20000 25000 30000 35000

uni-bielefeld.de

uni-muenster.de

uni-oldenburg.de

dipf.de

uni-dortmund.de

uni-hamburg.de

fu-berlin.de

uni-mainz.de

uni-leipzig.de

uni-bremen.de

uni-frankfurt.de

gwdg.de

uni-essen.de

uni-regensburg.de

tu-darmstadt.de

uni-koeln.de

ruhr-uni-bochum.de

uni-giessen.de

uni-jena.de

uni-hannover.de

11.02.03 Osnabrück, IuK 2003 24

ReferrerReferrerDBS GesamtDBS Gesamt

SUCHMASCHINEN59%

Landesbildungs-server

2%

schule.de6%

Schulweb5%

Jobbörsen12%

Unis, Institute14%

Studieren im Netz2%

11.02.03 Osnabrück, IuK 2003 25

Jobbörsen4%

Unis, Institute2%

Schulweb3%

LBS2%

schule.de6%

SUCHMASCHINEN83%

ReferrerReferrerHochschule & ForschungHochschule & Forschung

11.02.03 Osnabrück, IuK 2003 26

Schule

Weiterbildung

Sonstiges

Hochschule

Jobs / Bewerben

Übergreifende Informationen

Deutscher Bildungsserver

PISA

0%

5%

10%

15%

20%

25%

30%

35%

40%

Hochschule & Forschung Gesamt

Suchworte die zum DBS Suchworte die zum DBS führen (Top 30)führen (Top 30)

11.02.03 Osnabrück, IuK 2003 27

0,0% 0,5% 1,0% 1,5% 2,0% 2,5%

Termine

Jobbörse

Bereich Schule

ZeitungsdokumentationBildungswesen

ZDF Katalog fürUnterricht und

Volltextsuche

bonsai

Deutsch alsFremdsprache

dgfe

Uni

Gesamt

VerzeichnisseVerzeichnisse

11.02.03 Osnabrück, IuK 2003 28

• PISA: Zusammenfassung zentraler Befundehttp://www.mpib-berlin.mpg.de/pisa/ergebnisse.pdf

• Lernen für das Leben. Erste Ergebnisse der internationalen Schulleistungsstudie PISA 2000 http://www.pisa.oecd.org/Docs/Download/PISA2001(deutsch).pdf

• PISA – E http://www.mpib-berlin.mpg.de/pisa/PISA_E_Zusammenfassung2.pdf

• Lehrerstellen in Baden-Württemberg http://www.kultusministerium.baden-wuerttemberg.de/nuetzl/stellen/Stellen.pdf

• Klieme, Eckhard; Steinert, Brigitte: PISA 2000 : Sicherung von Mindeststandards, Chancengleichheit und verständnisorientiertes Lernen sind unerfüllte Ziele des deutschen Bildungssystems. http://www.dipf.de/publikationen/volltexte/publikationsverzeichnis/pisa_klieme_steinert_200112.pdf

AnfragenAnfragenHochschule & ForschungHochschule & Forschung

11.02.03 Osnabrück, IuK 2003 29

AusblickAusblick

• Welche Navigationsmuster (Pfade und Verweilzeiten) lassen sich identifizieren?

Suchen <-> Browsen, typische Pfade in einzelnen Inhaltsgebieten

• Repräsentative Befragungen relevanter Nutzergruppen zu Inhalten und Darstellung der Inhalte

• Befragungen von potentiellen Nutzern

11.02.03 Osnabrück, IuK 2003 30

Vielen Dank!Kontakt:

Homepage: www.educat.hu-berlin.de

E-mail: [email protected]

[email protected]

11.02.03 Osnabrück, IuK 2003 31

Beispiel 2Beispiel 2

11.02.03 Osnabrück, IuK 2003 32

zurückzurück

Documents

Bildungsportale in der Wissenschaft: Qualität oder Qual? Qualitätskriterien und Empirische Befunde zur Nutzung des Deutschen Bildungsservers Konzepte