79
Εισαγωγή σε ένα Εργαλείο Διαχείρισης Ηλεκτρονικών Αποθετηρίων Μελέτη περίπτωσης μιας Κοινότητας Χρηστών & Διασφάλιση Ποιότητας Μεταδεδομένων

Repositories - Metadata - Quality Assessment (Greek)

Embed Size (px)

Citation preview

Page 1: Repositories - Metadata - Quality Assessment (Greek)

Εισαγωγή σε ένα Εργαλείο Διαχείρισης Ηλεκτρονικών

ΑποθετηρίωνΜελέτη περίπτωσης

μιας Κοινότητας Χρηστών & Διασφάλιση Ποιότητας

Μεταδεδομένων

Page 2: Repositories - Metadata - Quality Assessment (Greek)

Δομή

• Ορισμός μεταδεδομένων & ψηφιακών αποθετηρίων - ΕΓΙΝΕ

• Παρουσίαση ενός εργαλείου διαχείρισης ψηφιακών εκπαιδευτικών αποθετηρίων

• Παρουσίαση μελέτης περίπτωσης χρήσης του εργαλείου από μια κοινότητα χρηστών

• Τρόποι διασφάλισης ποιότητας των μεταδεδόμένων

Page 3: Repositories - Metadata - Quality Assessment (Greek)

Παρουσίαση ενός εργαλείου διαχείρισης ψηφιακών

εκπαιδευτικών αποθετηρίων

Page 4: Repositories - Metadata - Quality Assessment (Greek)

CONFOLIO

Page 5: Repositories - Metadata - Quality Assessment (Greek)

Στόχος του Εργαλείου

• Διευκόλυνση της πρόσβασης, αποθήκευσης και οργάνωσης ψηφιακού εκπαιδευτικού υλικού σε θέματα Βιολογικής Γεωργίας και Αγροοικολογίας

• Παροχή e-Portfolios για ειδικούς του κλάδου και για κοινότητες χρηστών

• Υποστήριξη της διαδικασίας «δημοσίευσης» υλικού στην πύλη του Organic.Edunet

Page 6: Repositories - Metadata - Quality Assessment (Greek)

http://oe.confolio.org

Κεντρική σελίδα

Page 7: Repositories - Metadata - Quality Assessment (Greek)

usernamepassword

Είσοδος στο εργαλείο

Page 8: Repositories - Metadata - Quality Assessment (Greek)

Υπάρχουσες συλλογές

Page 9: Repositories - Metadata - Quality Assessment (Greek)

Δημιουργία φακέλου

Page 10: Repositories - Metadata - Quality Assessment (Greek)

Επεξεργασία φακέλου

Page 11: Repositories - Metadata - Quality Assessment (Greek)

Επεξεργασία φακέλου

Page 12: Repositories - Metadata - Quality Assessment (Greek)

«Ανέβασμα» αρχείου

Page 13: Repositories - Metadata - Quality Assessment (Greek)

c:\biodiversity.pdf

Παράδειγμα

Page 14: Repositories - Metadata - Quality Assessment (Greek)

c:\biodiversity.pdf

text

Παράδειγμα

Page 15: Repositories - Metadata - Quality Assessment (Greek)

text

c:\biodiversity.pdf

application

Παράδειγμα

Page 16: Repositories - Metadata - Quality Assessment (Greek)

Biodiversity

c:\biodiversity.pdf

text

application

Παράδειγμα

Page 17: Repositories - Metadata - Quality Assessment (Greek)

Biodiversity is the variation of life forms within a given ecosystem, biome, or for the entire Earth. Biodiversity is often used as a measure of the health of biological systems.

c:\biodiversity.pdf

application

text

Biodiversity

Παράδειγμα

Page 18: Repositories - Metadata - Quality Assessment (Greek)

c:\biodiversity.pdf

text

application

Biodiversity

Biodiversity is the variation of life forms within a given ecosystem, biome, or for the entire Earth. Biodiversity is often used as a measure of the health of biological systems.

Παράδειγμα

Page 19: Repositories - Metadata - Quality Assessment (Greek)

Υποχρεωτικά πεδία

Page 20: Repositories - Metadata - Quality Assessment (Greek)

Τίτλος

Page 21: Repositories - Metadata - Quality Assessment (Greek)

Γλώσσα (ες)

Page 22: Repositories - Metadata - Quality Assessment (Greek)

Περιγραφή

Page 23: Repositories - Metadata - Quality Assessment (Greek)

Περιορισμοί στη χρήση

Page 24: Repositories - Metadata - Quality Assessment (Greek)

Λέξεις κλειδιά

Page 25: Repositories - Metadata - Quality Assessment (Greek)

Δομή

Page 26: Repositories - Metadata - Quality Assessment (Greek)

Κόστος

Page 27: Repositories - Metadata - Quality Assessment (Greek)

«Ανέβασμα» υπερσυνδέσμου

Page 28: Repositories - Metadata - Quality Assessment (Greek)

Παρουσίαση μελέτης περίπτωσης χρήσης του εργαλείου από μια

κοινότητα χρηστών

Page 29: Repositories - Metadata - Quality Assessment (Greek)

Εισαγωγή

• Μελετήθηκε η χρήση του εργαλείου που παρουσιάστηκε, σε δύο άξονες:– Στην «αντίληψη» των ειδικών που χρησιμοποιούν το

εργαλείο σχετικά με τη χρήση των μεταδεδομένων με ειδικά διαμορφωμένο ερωτηματολόγιο

– Στην «αλληλεπίδραση» τους με το εργαλείο σε πραγματικές συνθήκες μέσα από ένα μεγάλο χρονικό διάστημα που ακολούθησε το πρώτο πείραμα

Page 30: Repositories - Metadata - Quality Assessment (Greek)

Πείραμα πρώτο

Αξιολόγηση των στοιχείων μεταδεδομένων που

χρησιμοποιούνται στο Confolio

Page 31: Repositories - Metadata - Quality Assessment (Greek)

Γενικές πληροφορίες

• Συμμετέχοντες: 20– Ειδικοί στη Βιολογική Γεωργία,

Πληροφορική, Εκπαίδευση • Ημερομηνία: Ιανούαριος 2009• Εργαλείο: Ερωτηματολόγιο

– Κλίμακες πέντε σημείων και μια ερώτηση πολλαπλής επιλογής με τρείς πιθανές επιλογές

Page 32: Repositories - Metadata - Quality Assessment (Greek)

Ερωτηματολόγιο

Page 33: Repositories - Metadata - Quality Assessment (Greek)

Είναι αυτό το στοιχείο εύκολο στην κατανόηση;

Easy to understand

33%

42%

21%4%

0%

Very Easy Fairly Easy MediocreFairly Difficult Very Difficult

Page 34: Repositories - Metadata - Quality Assessment (Greek)

• Ευκολονόητα στοιχεία:– General.Keyword – Technical.Format – Technical.Size

• Δυσνόητα στοιχεία:– Classification.Taxon– Relation.Resource– Educational.Semantic Density

Είναι αυτό το στοιχείο εύκολο στην κατανόηση;

Page 35: Repositories - Metadata - Quality Assessment (Greek)

Είναι αυτό το στοιχείο χρήσιμο;Useful for your content

14%

41%

33%

12% 0%

Very Useful Fairly Useful Indifferent

Fairly Useless Completely Useless

Page 36: Repositories - Metadata - Quality Assessment (Greek)

• Περισσότερο χρήσιμα:– General.Identifier– General.Description – Technical.Format

• Λιγότερο χρήσιμα:– Classification.Taxon– Annotation.Entity – Annotation.Date

Είναι αυτό το στοιχείο χρήσιμο;

Page 37: Repositories - Metadata - Quality Assessment (Greek)

Είναι οι τιμές που μπορούν να πάρουν οι κατάλληλες;

Clear Values

9%

50%

37%

4%

0%

Very Clear Fairly Clear Mediocre Fairly Confusing Very Confusing

Page 38: Repositories - Metadata - Quality Assessment (Greek)

• Ξεκάθαρες και κατάλληλες τιμές:– General.Description – Rights.Cost – Format.Size

• Λιγότερο ξεκάθαρες ή/και κατάλληλες:– Classification.Taxon– Classification.Purpose – General.Identifier

Είναι οι τιμές που μπορούν να πάρουν οι κατάλληλες;

Page 39: Repositories - Metadata - Quality Assessment (Greek)

Χαρακτηρισμός των στοιχείων

Status Mandatory Recommended Optional

Pre-evaluation 19 26 12

Post-evaluation 25 21 11

% +31% -19% -8,3%

Page 40: Repositories - Metadata - Quality Assessment (Greek)

Πείραμα δεύτερο

Αξιολόγηση των δεδομένων χρήσης του εργαλείου κατά την διαδικασία

περιγραφής των ψηφιακών εκπαιδευτικών πηγών

Page 41: Repositories - Metadata - Quality Assessment (Greek)

Γενικές πληροφορίες

• Συμμετέχοντες: 30– Ειδικοί στη Βιολογική Γεωργία,

Πληροφορική, Εκπαίδευση

• Ημερομηνία: Ιαν 2009 – Μαρ 2009• Εργαλείο: Ανάλυση αρχείων χρήσης

(log files)

Page 42: Repositories - Metadata - Quality Assessment (Greek)

Αποτελέσματα

• Στοιχείο: Λέξεις κλειδιά

Πλήθος % % συνόλου

Από 1 ως 3 296 48,4 26,8

Από 4 ως 6 197 32,2 17,8

Από 7 ως 9 97 15,9 8,8

Περισσότερα από 9

21 3,5 1,9

ΣΥΝΟΛΟ 611 100% 55%

Page 43: Repositories - Metadata - Quality Assessment (Greek)

Πλήθος % % συνόλου

1 ή 2 237 52,1 21,43 ή 4 99 21,8 95 ή 6 46 10,1 4,2

Περισσότερα από 6 73 16 6,6ΣΥΝΟΛΟ 455 100% 41,2%

Αποτελέσματα

• Στοιχείο: Οντολογία

Page 44: Repositories - Metadata - Quality Assessment (Greek)

Πλήθος % % συνόλου

1 ή 2 385 68,1 34,8

3 ή 4 143 25,3 12,9

5 ή 6 37 6,6 3,3

ΣΥΝΟΛΟ 565 100% 51%

Αποτελέσματα

• Στοιχείο: Ρόλος τελικού χρήστη

Page 45: Repositories - Metadata - Quality Assessment (Greek)

Υποχρεωτικά στοιχεία

• Δεν χρησιμοποιήθηκαν όλα στον βαθμό που έπρεπε

0%10%20%30%40%50%60%70%80%90%

100%

Resources

Title

Description

Language

Copyright and OtherRestrictions

Rights Cost

Page 46: Repositories - Metadata - Quality Assessment (Greek)

Προτεινόμενα στοιχεία

• Ακόμα χειρότερη εικόνα

0,00%

10,00%

20,00%

30,00%

40,00%

50,00%

60,00%

Resources

Keyword

Learning Resource Type

Intended End User Role

Contribute Role

Contribute Date

TaxonPathTaxonId

Contribute Entity

Context

Structure

Rights Description

Typical Age Range

Page 47: Repositories - Metadata - Quality Assessment (Greek)

Συμπεράσματα

• Διαφορετική άποψη για τα στοιχεία στο χαρτί, διαφορετική στην οθόνη…

• Με την χρήση αυτή των μεταδεδομένων, πολλοί από τους τρόπους αναζήτησης στην πύλη του Organic.Edunet δεν θα δούλευαν όπως αναμενόταν

• Μεγάλη διαφορά ανάμεσα στην σχεδίαση και στην τελική υλοποίηση

Page 48: Repositories - Metadata - Quality Assessment (Greek)

Διασφάλιση Ποιότητας Μεταδεδομένων

Page 49: Repositories - Metadata - Quality Assessment (Greek)

Ανάγκη

• Ενός μηχανισμού που θα ενίσχυε την ποιότητα των μεταδεδομένων που οι εταίροι του project ανέβαζαν στο Confolio

• Ανάπτυξης μιας κοινής αντίληψης γύρω από την διαδικασία περιγραφής των ψηφιακών εκπαιδευτικών πηγών με μεταδεδομένα

Page 50: Repositories - Metadata - Quality Assessment (Greek)

Διαδικασία

• Παρουσίαση κοινών λαθών σε μεταδεδομένα και συζήτηση

• Ορισμός μιας ομάδας ειδικών που θα αξιολογούσαν τα μεταδεδομένα

• Επιλογή ενός τυχαίου δείγματος μεταδεδομένων προς αξιολόγηση

• Αξιολόγηση και αναθεώρηση μεταδεδομένων

Page 51: Repositories - Metadata - Quality Assessment (Greek)

BCE

• Τι λάθη παρατηρούμε εδώ;;;

Page 52: Repositories - Metadata - Quality Assessment (Greek)

BMUKK / BMLFUW

Page 53: Repositories - Metadata - Quality Assessment (Greek)

EULS

Page 54: Repositories - Metadata - Quality Assessment (Greek)

EULS

Page 55: Repositories - Metadata - Quality Assessment (Greek)

MOGERT

Page 56: Repositories - Metadata - Quality Assessment (Greek)

USAMVB-FA

• CERCETĂRI PRIVIND CARACTERISTICILE BIOLOGICE, MORFOLOGICE ŞI CALITATEA RECOLTEI LA SPECIA FAGOPYRUM ESCULENTUM MOENCH. ÎN CONDIŢIILE DIN PARTEA CENTRALĂ A CÂMPIEI ROMÂNE

• Δεν είναι λίγο μεγάλο για τίτλος;;;

Page 57: Repositories - Metadata - Quality Assessment (Greek)

USAMVB-FA

Page 58: Repositories - Metadata - Quality Assessment (Greek)

Κύρια προβλήματα

• Λάθος τρόπος εισαγωγής των λέξεων κλειδιά– Πως εισάγουμε πολλαπλά keywords;

• Όροι οντολογίας– Πρέπει να δίνουμε περισσότερους ανά πόρο

• Πνευματικά δικαιώματα– Χρήση των Creative commons

Page 59: Repositories - Metadata - Quality Assessment (Greek)

Αξιολόγηση μεταδεδομένων

Page 60: Repositories - Metadata - Quality Assessment (Greek)
Page 61: Repositories - Metadata - Quality Assessment (Greek)

Πληροφορίες για τους ειδικούς

• 21 ειδικοί που θα αξιολογήσουν

• 125 εγγραφές μεταδεδομένων (105 ολοκληρώθηκαν)

• 5 εγγραφές ανά ειδικό

• Τυχαία δειγματοληψία εγγραφών που όμως βασίστηκε στο μέγεθος των συλλογών με ψηφιακό υλικό που είχαν στο project

Page 62: Repositories - Metadata - Quality Assessment (Greek)

Τρόπος ανάθεσης

Page 63: Repositories - Metadata - Quality Assessment (Greek)

Αποτελέσματα

Page 64: Repositories - Metadata - Quality Assessment (Greek)

Αποτελέσματα

Page 65: Repositories - Metadata - Quality Assessment (Greek)

Με μια ματιά

• Πληρότητα 4,2• Ακρίβεια 4,3• Συνέπεια με τα επιλεχθέντα μεταδεδομένα 4,4• Αντικειμενικότητα 4,6• Καταλληλότητα 4,1• Επίπεδο γλώσσας (αγγλικά) 4,6• Συνολικό σκορ 4,2

Page 66: Repositories - Metadata - Quality Assessment (Greek)

Συμπεράσματα

• Γενικά, οι εγγραφές των μεταδεδομένων είχαν υψηλό σκορ– Από 82% μέχρι 92%

• Ωστόσο, 29 από τα 105 (30%) απορρίφθηκαν σαν «ακατάλληλα» για την πύλη του Organic.Edunet – Αναφορικά με το επίπεδο των μεταδεδομένων

Page 67: Repositories - Metadata - Quality Assessment (Greek)

Αποτέλεσμα

• Όλα τα ακατάλληλα, επέστρεψαν στους ιδιοκτήτες τους για αναθεώρηση

• Συντάχθηκε έγγραφο με «Καλές και κακές πρακτικές για μεταδεδομένα» το οποίο στάλθηκε σε όλους τους εταίρους

• Ένας άνθρωπος ασχολήθηκε με το ψάξιμο και άλλων resources με προβλήματα, τα οποία στάλθηκαν και εκείνα για αναθεώρηση

Page 68: Repositories - Metadata - Quality Assessment (Greek)

Ανακεφαλαίωση

• Όσο καλά κι αν σχεδιάσεις ένα εργαλείο, αυτό από μόνο του, δεν εγγυάται την επιτυχία

• Σπάνια οι άνθρωποι κάνουν αυτό που λένε

• Η διαδικασία περιγραφής των ψηφιακών εκπαιδευτικών πηγών με μεταδεδομένα, είναι διαδικασία εν πολλοίς χειρονακτική…

Page 69: Repositories - Metadata - Quality Assessment (Greek)

Εργαστήριο

Page 70: Repositories - Metadata - Quality Assessment (Greek)

Πρακτική εξάσκηση στην παροχή μεταδεδομένων

Για ψηφιακές εκπαιδευτικές πηγές

Page 71: Repositories - Metadata - Quality Assessment (Greek)

Οδηγίες

• Αναζητήστε μέσω Google έναν εκπαιδευτικό πόρο αναφορικά με τη Βιολογική Γεωργία– Ιστότοπο, παρουσίαση, άρθρο, έρευνα, κλπ

• Μπείτε στο http://confolio.vm.grnet.gr

• Προσπαθήστε να τον ανεβάσετε και περιγράψετε με μεταδεδομένα

Page 72: Repositories - Metadata - Quality Assessment (Greek)

Tips

• Προσπαθήστε να βρείτε ένα πόρο που να σας παρέχει αρκετές πληροφορίες ώστε να τον περιγράψετε πλήρως

• Δώστε τα μεταδεδομένα για τα οποία είστε σίγουροι 100%

• Χρόνος: 15 λεπτά

Page 73: Repositories - Metadata - Quality Assessment (Greek)

Αξιολόγηση

• Μετά από μια πρώτη επαφή με τα μεταδεδομένα, αξιολογείστε τις διαστάσεις που βλέπετε στο χαρτί μπροστά σας

• Χρόνος: 15 λεπτά

Page 74: Repositories - Metadata - Quality Assessment (Greek)

Αξιολόγηση των μεταδεδομένων

Page 75: Repositories - Metadata - Quality Assessment (Greek)

Οδηγίες

• Μπείτε στο λογαριασμό σας στο Confolio και ανοίξτε τα μεταδεδομένα που δώσατε

• Ανοίξτε και την πηγή που περιγράψατε

• Σηκωθείτε και καθίστε στον υπολογιστή του εκ δεξιών διπλανού σας

Page 76: Repositories - Metadata - Quality Assessment (Greek)

Οδηγίες

• Εξετάστε προσεκτικά την πηγή και αξιολογείστε τα μεταδεδομένα που βλέπετε στη οθόνη, χρησιμοποιώντας τη φόρμα

• Χρόνος: 15 λεπτά

Page 77: Repositories - Metadata - Quality Assessment (Greek)

Συζήτηση

Σκέψεις για την ποιότητα των μεταδεδομένων

Page 78: Repositories - Metadata - Quality Assessment (Greek)

Ερώτηση 1

• Μεταδεδομένα & Confolio: Σχόλια για……την διεπαφή χρήστη…τον αριθμό των στοιχείων που ζητούνται…τις τιμές που μπορούν να πάρουν…την ευκολία κατανόησης τους

Άλλες παρατηρήσεις;

10 λεπτά

Page 79: Repositories - Metadata - Quality Assessment (Greek)

Ερώτηση 2

• Ποιότητα μεταδεδομένων: Σχόλια για……το βαθμό που αυτή επηρεάζει την Πύλη…τρόπους βελτίωσης;…αναμενόμενη ποιότητα και πραγματική;…τη σχέση ποιότητας και Confolio

Άλλες παρατηρήσεις;

10 λεπτά