Περίληψη Εισαγωγή Η έννοια «αξιολόγηση εκπαιδευτικού λογισμικού» είναι κοινός τόπος στις συζητήσεις τόσο των εκπαιδευτικών όσο και των μηχανικών λογισμικού, όταν αμφότεροι ασχολούνται με τη χρήση και ανάπτυξη των εφαρμογών του λογισμικού για την εκπαιδευτική κοινότητα. Η γενόμενη έρευνα έχει καταδείξει πλήθος θεμάτων που ανακύπτουν κατά τη χρήση των υφιστάμενων Ε.Λ. Ως εκ τούτου, η διαδικασία αξιολόγησης δεν μπορεί παρά να θεωρηθεί ως υπό διερεύνηση, δεδομένου ότι οι ενεχόμενοι επιθυμούν διαφανείς διαδικασίες που να αποσκοπούν, μέσω αξιολόγησης, σε βελτίωση παραδοτέων εφαρμογών. Σκοπός Σκοπός μας ήταν, μέσω μιας μελέτης περίπτωσης, να προσεγγίσουμε το Ε.Λ τόσο από την σκοπιά του εκπαιδευτικού, ο οποίος καλείται να το χρησιμοποιήσει, όσο και του ερευνητή-αξιολογητή, με γνώση στην ανάπτυξη εφαρμογών πληροφορικής. Ευρήματα Ένας εκτενής κριτικός έλεγχος για τις υφιστάμενες προσεγγίσεις αξιολόγησης των διαφόρων κατηγοριών του Ε.Λ. κατέληξε στην επιλογή της κατάλληλης μεθοδολογίας και ομάδων κριτηρίων. Με τη χρήση τους σχηματίστηκε ένα ερωτηματολόγιο με κλίμακα πέντε βαθμών. Πέντε αξιολογητές ειδικοί πεδίου, από τους οποίους οι δύο είναι και έμπειροι σε θέματα ευχρηστίας ως μηχανικοί λογισμικού, πραγματοποίησαν την αξιολόγηση. Με στατιστική επεξεργασία των ερωτηματολογίων προέκυψαν τόσο ένας συνολικός βαθμός που συγκέρασε τις απόψεις των αξιολογητών όσο και βαθμοί ανά κατηγορία κριτηρίων. Συμπεράσματα Το λογισμικό που αξιολογήθηκε ως άνω χαρακτηρίστηκε ως επαρκές και ικανοποιητικό. Ωστόσο η διαδικασία κατέδειξε κάποια προβλήματα που θα μπορούσαν να έχουν λυθεί με τη χρήση διαμορφωτικής αξιολόγησης και κάποια άλλα που προέκυψαν από αλλαγές στην χρησιμοποιούμενη υλικοτεχνική υποδομή, όπως το μαθητικό Netbook.
Welcome message from author
This document is posted to help you gain knowledge. Please leave a comment to let me know what you think about it! Share it to your friends and learn new things together.
Την τεχνική αρτιότητα – Τη λειτουργικότητα– Τη συμβατότητα του λογισμικού– Τη δυνατότητα Υποστήριξης του λογισμικού
Τη στήριξη της διδασκαλίας– Τα εργαλεία Δασκάλου-Μαθητή– Τα συνοδευτικά Εγχειρίδια Χρήσης του λογισμικού και Υποστήριξης Δασκάλου
Το μαθησιακό αποτέλεσμα Το κόστος
10
Case Study: Ε.Λ «Ανακαλύπτω τις Μηχανές»
Αξιολόγηση του πολυμεσικού εκπαιδευτικού λογισμικού «Ανακαλύπτω τις Μηχανές» χρησιμοποιώντας την επιλεχθείσα μεθοδολογία
11
Επιλογή μεθοδολογίας για τη διαδικασία αξιολόγησης (Ι)
Μελέτη των δεδομένων:
Το συγκεκριμένο λογισμικό είναι ολοκληρωμένο και διατίθεται προς χρήση. Η αξιολόγηση του εν λόγω λογισμικού είναι επιθυμητό να γίνει με κατάλληλες προσαρμογές από διάφορες ομάδες χρηστών και όχι αποκλειστικά από ειδικούς αξιολογητές.Δεν είναι επιθυμητή μια χρονοβόρα μέθοδος, με απαιτήσεις για κατασκευή πολλών σεναρίων χρήσης.Δεν είναι επιθυμητός ο έλεγχος της συμβατότητας με κανόνες και πρότυπα σχεδιασμού καθώς επιθυμούμε μια περισσότερο ολιστική προσέγγιση.
12
Επιλογή μεθοδολογίας για τη διαδικασία αξιολόγησης (ΙΙ)
Μέθοδος: Ευρετική αλλά με τους ευρετικούς κανόνες του Nielsen προσαρμοσμένους σε εκπαιδευτικά χαρακτηριστικά.
Επιθεώρηση των χαρακτηριστικών της εφαρμογής με κριτήρια που μπορούν να μετρηθούν, επομένως περισσότερο αντικειμενικά ως προς την επεξεργασία.Χρησιμοποίηση όταν οι ενέργειες του χρήστη δεν είναι προβλέψιμες. Απαιτεί μικρό σχετικά αριθμό αξιολογητών και δεν είναι επίπονη. Δεν είναι ιδιαίτερα χρονοβόρα και έχει χαμηλό κόστος. Καθένα από τα κριτήρια αξιολόγησης μπορεί να αποτελέσει την πηγή για μία ή περισσότερες ερωτήσεις σε ένα ερωτηματολόγιο που απευθύνεται σε κάθε μια από τις κατηγορίες αξιολογητών.
13
Εργαλεία έρευνας
Μέσο συγκέντρωσης των επιθυμητών πληροφοριών: ερωτηματολόγιο.
Πραγματοποιείται ποσοτική αξιολόγηση από πέντε αξιολογητές εκπαιδευτικούς (δύο εκ των οποίων μηχανικοί λογισμικού).
Η αξιολόγηση πραγματοποιήθηκε με τη χρήση ενός ερωτηματολογίου το οποίο χρησιμοποιεί μια κλίμακα Likert. Τα αντικείμενα Likert υλοποιούνται με 5 βαθμωτά επίπεδα αποκρίσεων (Oppenheim, 2005).
Και στις ???? αξιολογήσεις το λογισμικό θεωρείται ???????
Καθόλου Λίγο Μέτρια Πολύ Πάρα πολύ1 2 3 4 5
Απαράδεκτη Μη ικανοποιητική Μέτρια Ικανοποιητική Πολύ καλή
Προβλήματα • Ελλείψεις που αφορούν στις συνεργατικές δραστηριότητες:
• διασύνδεσης με άλλους χρήστες του λογισμικού μέσω chat, forum, email ή τηλεδιάσκεψης• πρόσβασης στο Internet
• Δεν υπάρχει εύκολη συνεργασία με άλλες εφαρμογές για ανταλλαγή στοιχείων• Δεν επιτρέπει τη δημιουργία τετραδίου εργασίας και παρέχει στοιχεία αποτυπωμένα μόνο ως
εικόνα• Τυχόν τροποποιήσεις δεν μπορούν να πραγματοποιηθούν εύκολα (το update ισοδυναμεί με εκ
νέου εγκατάσταση). • Το λογισμικό δεν εγκαθίσταται πλήρως αλλά απαιτεί τη χρήση CD-ROM drive με αποτέλεσμα
για το μαθητικό Netbook, που δεν έχει τέτοια συσκευή να απαιτείται εξειδικευμένη διαδικασία.
Τα παραπάνω προβλήματα θα μπορούσαν να έχουν λυθεί με τη χρήση διαμορφωτικής αξιολόγησης.
17
Μελλοντική έρευνα
Καθένα από τα κριτήρια αξιολόγησης μπορεί να αποτελέσει την πηγή για μία ή περισσότερες ερωτήσεις σε ένα ερωτηματολόγιο που απευθύνεται σε κάθε μια από τις υπόλοιπες κατηγορίες αξιολογητών. Επομένως δίνεται μελλοντικά η δυνατότητα χρήσης υποσυνόλου
των κριτηρίων ώστε να κατασκευαστούν τέτοια ερωτηματολόγια.
Στο παραγόμενο ερωτηματολόγιο η στατιστική επεξεργασία έγινε με την παραδοχή πως στη διαμόρφωση των βαθμών των ομάδων κριτηρίων συμμετέχουν όλα τα κριτήρια με το ίδιο ποσοστό. Αυτό μελλοντικά μπορεί να εξελιχθεί ώστε να αποκτήσουν βάρη τα
επιμέρους κριτήρια.
18
Αναφορές Ι
Ξενόγλωσση D. Benyon, G. Davies, L. Keller & Y. Rogers, A guide to usability-usability now!, Milton Keynes:
The Open University, 1990.
R. Condie, K. Livingston, “Blending online learning with traditional approaches: changing practices”, British Journal of Educational Technology, vol. 8, issue 2, pp. 337–348, 2007.
H. Deghaidy, A. Nouby, “Effectiveness of a blended e-learning cooperative approach in an Egyptian teacher education programme”, Computers & Education, ScienceDirect, 2008.
D. Jonassen, Designing constructivist learning environments. In C. Reigeluth (Ed.), Instructional design theories and models: A new paradigm of instructional theory (Vol. II, pp. 215-239). Mahwah, NJ: Lawrence Erlbaum Associates, 1999.
A. Karoulis, S. Demetriadis, A. Pombortsis, “Comparison of expert-based and empirical evaluation methodologies in the case of a CBL environment: the ‘‘Orestis’’ experience”, Computers & Education, vol. 47, pp. 172–185, 2006.
C. Knussen, G. Tanner, M. Kibby, “An approach to the evaluation of hypermedia”, Computers & Education, vol. 17, issue 1, pp.13-24, 1991.
J. Nielsen, R. Molich, “Heuristic evaluation of user interfaces”, In Empowering People: Human Factors in Computing Systems: CHI ‘90 Conference Proceedings (Edited by Chew J. C. and Whiteside J.), pp. 249-256, Seattle, Wash., 1990.
19
Αναφορές ΙΙ
J. Nielsen, Usability inspection methods, in J. Nielsen, R. L. Mark (ed.), Usability Inpection Methods, John Willey, New York, 1994.
A.N. Oppenheim, “Questionnaire Design, Interviewing and attitude measurement”, Continuum, 2005.
M. Scriven, “The methodology of evaluation”, In R. Tyler (Ed.), Perspectives of curriculum evaluation, Chicago: Rand McNally 1976.
D. Squires, A. McDougall, Choosing and Using Educational Software: A teachers' guide, The Falmer Press, London 1994.
D. Squires, J. Preece, “Predicting quality in educational software: Evaluating for learning, usability and the synergy between them”, Interacting with Computers, vol. 11, pp. 467-483, 1999.
D. Squires, J. Preece, “Usability and Learning: Evaluating the potential of educational software”, Computers & Education, vol. 27, issue 1, pp. 15-22, 1996.
G. Sim, S. MacFarlane, J. Read, “All work and no play: Measuring fun, usability, and learning in software for children”, Computers & Education, vol. 46, pp. 235–248, 2006.
A. Spyrtou, E. Hatzikraniotis, P. Kariotoglou, “Educational software for improving learning aspects of Newton’s Third Law for student teachers”, Education and Information Technologies, vol. 14, pp. 163–187, Springer, March 2009.
L. Vigotsky, Σκέψη και Γλώσσα, Γνώση, Αθήνα 1998.
20
Αναφορές ΙΙΙ
Ελληνική Β. Δαγδιλέλης (επιμέλεια), Επιμορφωτικό υλικό για την εκπαίδευση των επιμορφωτών στα
Χ. Παναγιωτακόπουλος & Π. Πιντέλας, “Το πρόβλημα της αξιολόγησης του εκπαιδευτικού λογισμικού”, Πάτρα, 2001.
Χ. Παναγιωτακόπουλος, X. Πιερρακέας & Π. Πιντέλας, Το εκπαιδευτικό λογισμικό και η αξιολόγησή του, Μεταίχμιο, Αθήνα 2003.
Π. Πιντέλας, “Εκπαιδευτικό Λογισμικό: Μια πρόταση για την εξασφάλιση της ποιότητάς του”, Πανελλήνιο Συνέδριο Πληροφορική στην Εκπαίδευση, Ιωάννινα, 1999.
A. Ράπτης & A. Ράπτη, Μάθηση και Διδασκαλία στην Κοινωνία της Πληροφορίας, Τόμος Α΄: Ολική προσέγγιση, Αθήνα: Έκδοση συγγραφέων, 2007.