Χαράλαμπος Καραγιαννίδης

Σχετικά έγγραφα
#8 Αξιολόγηση ευχρηστίας λογισµικού. Ανάλυση πληκτρολογήσεων. Μέσοι χρόνοι τυπικών πληκτρολογήσεων. Παράδειγµα...

Ελεγχος, Αξιοπιστία και Διασφάλιση Ποιότητας Λογισµικού: Εξωτερική Ποιότητα

ΕΠΛ 435: Αλληλεπίδραση Ανθρώπου Υπολογιστή

Επικοινωνία Ανθρώπου Υπολογιστή. Α6. Αξιολόγηση διαδραστικών συστημάτων

ΕΠΛ 435: Αλληλεπίδραση Ανθρώπου Υπολογιστή

Αλληλεπίδραση Ανθρώπου- Υπολογιστή & Ευχρηστία. Ενότητα 11: Αξιολόγηση Σχεδίασης Σαπρίκης Ευάγγελος Τμήμα Διοίκησης Επιχειρήσεων (Γρεβενά)

Τεχνολογία Πολιτισμικού Λογισμικού

Εισαγωγή στην επικοινωνία ανθρώπου υπολογιστή. Νικόλαος Αβούρης Eκδόσεις ΔΙΑΥΛΟΣ, Αθήνα ΠΡΟΛΟΓΟΣ Περιεχόμενα Εγχειριδίου

Μεθοδολογίες αξιολόγησης εκπαιδευτικού. λογισμικού

Συστήµατα Τηλεκπαίδευσης: Αξιολόγηση Εκπαιδευτικού Λογισµικού

Ανακεφαλαίωση. Χαράλαμπος Καραγιαννίδης. Διάλεξη Εφαρμογές ΤΠΕ στην Εκπαίδευση & την Ειδική Αγωγή.

ΕΡΩΤΗΜΑΤΟΛΟΓΙΟ. Για τη διευκόλυνσή σας, μπορείτε να συμπληρώσετε το ερωτηματολόγιο ηλεκτρονικά, στη διεύθυνση:

Γεωργική Εκπαίδευση Ενότητα 12

Περιεχόμενα. 1 Υποδείγματα αλληλεπίδρασης, αρχές & μοτίβα σχεδίασης Περίληψη... 19

Στόχος της ψυχολογικής έρευνας:

ΘΕΜΑΤΑ ΑΞΙΟΛΟΓΗΣΗΣ ΚΑΤΑΣΚΕΥΗ ΕΡΩΤΗΣΕΩΝ. Άννα Κουκά

11.Μέθοδοι Αξιολόγησης Ευχρηστίας (Μέρος 2)

2. Το πρόγραµµα Ο ΥΣΣΕΑΣ: Μεθοδολογία αξιολόγησης

ΠΕΡΙΓΡΑΜΜΑ ΜΑΘΗΜΑΤΟΣ

Αξιολόγηση του Εκπαιδευτικού Λογισµικού

Αξιολόγηση. Χαρίκλεια Τσαλαπάτα 3/10/2016

Συστήµατα Τηλεκπαίδευσης: Κύκλος ζωής εκπαιδευτικού υλικού

«Φυσική Αγωγή στο δημοτικό σχολείο. Πως βλέπουν το μάθημα οι μαθητές του σχολείου.»

ΠΛΑΙΣΙΟ ΔΙΔΑΣΚΑΛΙΑΣ: ΠΕΡΙΓΡΑΦΗ ΔΙΔΑΣΚΑΛΙΑΣ:

Ερωτηματολόγιο. Τρόποι χορήγησης: α) Με αλληλογραφία β) Με απευθείας χορήγηση γ) Τηλεφωνικά

ΣΕΜΙΝΑΡΙΟ ΜΕΤΑΠΤΥΧΙΑΚΗΣ ΔΙΠΛΩΜΑΤΙΚΗΣ ΕΡΓΑΣΙΑΣ

ΕΙΔΗ ΕΡΕΥΝΑΣ I: ΠΕΙΡΑΜΑΤΙΚΗ ΕΡΕΥΝΑ & ΠΕΙΡΑΜΑΤΙΚΟΙ ΣΧΕΔΙΑΣΜΟΙ

ΟΡΓΑΝΩΣΗ ΚΑΙ ΥΛΟΠΟΙΗΣΗ ΜΙΑΣ ΕΡΕΥΝΑΣ. ΜΑΝΟΥΣΟΣ ΕΜΜ. ΚΑΜΠΟΥΡΗΣ, ΒΙΟΛΟΓΟΣ, PhD ΙΑΤΡΙΚHΣ

Διδάκτορας Οικονομικού Πανεπιστημίου Αθηνών

Χαράλαμπος Καραγιαννίδης

Ενδιάμεση Έκθεση: Ποσοτικά Ευρήματα Έρευνας απόψεων Σχολικών Συμβούλων για τα Γνωστικά Αντικείμενα του Δημοτικού

Ο υπολογιστής ως γνωστικό εργαλείο. Καθηγητής Τ. Α. Μικρόπουλος

ΙΕΚ ΞΑΝΘΗΣ. Μάθημα : Στατιστική Ι. Υποενότητα : Κωδικοποίηση

Στρατηγική Αξιολόγησης κατά την Υλοποίηση Εκπαιδευτικού Λογισμικού

ΠΕΡΙΓΡΑΜΜΑ ΜΑΘΗΜΑΤΟΣ

710 -Μάθηση - Απόδοση

710 -Μάθηση - Απόδοση

ΣΥΝΕΝΤΕΥΞΕΙΣ. Συνέντευξη = Ερευνητική μέθοδος που χρησιμοποιείται στην κοινωνική έρευνα και καθιστά εσάς ερευνητές.

ΑΝΑΠΤΥΞΗ ΕΦΑΡΜΟΓΩΝ ΣΕ Π ΡΟΓΡΑΜΜΑΤΙΣΤΙΚΟ Π ΕΡΙΒΑΛΛΟΝ

Θέµατα αξιολόγησης εκπαιδευτικού λογισµικού

Ανοικτά Ακαδηµα κά Μαθήµατα

ΔΟΜΕΣ ΕΠΑΝΑΛΗΨΗΣ ΟΣΟ ΣΥΝΘΗΚΗ ΕΠΑΝΑΛΑΒΕ.ΤΕΛΟΣ_ΕΠΑΝΑΛΗΨΗΣ. Κοκκαλάρα Μαρία ΠΕ19

ΣΥΓΚΡΙΤΙΚΗ ΠΕΙΡΑΜΑΤΙΚΗ ΜΕΛΕΤΗ ΣΤΑΣΗΣ ΜΑΘΗΤΩΝ ΕΝΑΝΤΙ ΤΗΣ ΔΙΔΑΣΚΑΛΙΑΣ ΜΑΘΗΜΑΤΟΣ ΙΣΤΟΡΙΑΣ ΜΕ Η ΧΩΡΙΣ ΕΚΠΑΙΔΕΥΤΙΚΟ ΛΟΓΙΣΜΙΚΟ

Από τη σχολική συμβατική τάξη στο νέο υβριδικό μαθησιακό περιβάλλον: εκπαίδευση από απόσταση για συνεργασία και μάθηση

ΠΕΡΙΓΡΑΜΜΑ ΜΑΘΗΜΑΤΟΣ

Κατηγοριοποίηση εκπαιδευτικού λογισμικού

Η διδασκαλία του μαθήματος της Τεχνολογίας στο Λύκειο

ΕΠΙΜΟΡΦΩΤΙΚΗ ΗΜΕΡΙΔΑ «Η ΑΞΙΟΛΟΓΗΣΗ ΤΟΥ ΜΑΘΗΤΗ ΣΥΜΦΩΝΑ ΜΕ ΤΑ ΝΕΑ ΠΡΟΓΡΑΜΜΑΤΑ ΣΠΟΥΔΩΝ»

Μεθοδολογία Εκπαιδευτικής Έρευνας στη ΜΕ

Γ Γυμνασίου: Οδηγίες Γραπτής Εργασίας και Σεμιναρίων. Επιμέλεια Καραβλίδης Αλέξανδρος. Πίνακας περιεχομένων

Η ΣΗΜΑΣΙΑ ΕΥΧΡΗΣΤΙΑΣ ΣΤΟ ΣΧΕΔΙΑΣΜΟ ΔΙΑΔΙΚΤΥΑΚΩΝ. Κωνσταντίνα Βασιλοπούλου, PhD Department of Computation, UMIST

Εισαγωγή. Χαράλαμπος Καραγιαννίδης. Διάλεξη 1. Εφαρμογές ΤΠΕ στην Εκπαίδευση & την Ειδική Αγωγή.

Τεχνολογία Πολιτισμικού Λογισμικού

ΔΙΠΛΩΜΑΤΙΚΗ ΕΡΓΑΣΙΑ Σχεδίαση και Ανάπτυξη εφαρμογής ηλεκτρονικής εκπαίδευσης σε περιβάλλον Διαδικτύου: Υποστήριξη χαρακτηριστικών αξιολόγησης

Ο ρόλος του προσωπικού της εκπαίδευσης στη διασφάλιση ποιότητας

Μάθημα: «Μεθοδολογία έρευνας» Μορφές επικοινωνίας μεταξύ νηπιαγωγείου και οικογένειας

Εκπαιδευτική Αξιοποίηση Λογισμικού Γενικής Χρήσης

Ενότητα 1: Εισαγωγή. ΤΕΙ Στερεάς Ελλάδας. Τμήμα Φυσικοθεραπείας. Προπτυχιακό Πρόγραμμα. Μάθημα: Βιοστατιστική-Οικονομία της υγείας Εξάμηνο: Ε (5 ο )

3 βήματα για την ένταξη των ΤΠΕ: 1. Εμπλουτισμός 2. Δραστηριότητα 3. Σενάριο Πέτρος Κλιάπης-Όλγα Κασσώτη Επιμόρφωση εκπαιδευτικών

Δρ Παναγιώτης Ζαφείρης > Αναπληρωτής Καθηγητής. Λογιπαίγνιον

ΜΑΘΗΜΑ: ΜΑΡΚΕΤΙΝΓΚ ΠΡΟΙΌΝΤΩΝ ΞΥΛΟΥ ΚΑΙ ΕΠΙΠΛΟΥ ΜΑΡΚΕΤΙΝΓΚ

ΔΗΜΟΣΙΕΣ ΣΧΕΣΕΙΣ ΓΙΑ ΜΗ ΚΕΡΔΟΣΚΟΠΙΚΟΥΣ ΟΡΓΑΝΙΣΜΟΥΣ

Μεθοδολογία Εκπαιδευτικής Ερευνας στη ΜΕ

Εκτίμηση Αξιολόγηση της Μάθησης

Αξιολόγηση διδακτικών πλάνων

Διδακτική πρόταση 10: Πώς οργανώνονταν οι άνθρωποι της Εποχής του Χαλκού;

Αποτελέσματα. Πληροφοριακό Σύστημα ΜΟΔΙΠ Πανεπιστημίου Κρήτης Ερωτηματολόγιο 'Απειροστικός Λογισμός ΙΙΙ' Ερωτηματολόγιο

Μεθοδολογία Παραγωγής Πολιτισμικών και Πολυμεσικών Τίτλων

Περιγραφή του εκπαιδευτικού/ μαθησιακού υλικού (Teaching plan)

ΕΠΙΚΟΙΝΩΝΙΑ ΑΝΘΡΩΠΟΥ - ΜΗΧΑΝΗΣ. Διδάσκων: Κωνσταντίνος Στεφανίδης

Εφαρμογές Αnimation στη Διδακτική Ξένων Γλωσσών. Περιεχόμενο Προγράμματος

ΠΕΡΙΓΡΑΜΜΑ ΜΑΘΗΜΑΤΟΣ

ΔΙΔΑΚΤΙΚΗ ΜΑΘΗΜΑΤΙΚΩΝ Ι. Χριστίνα Μισαηλίδου

ΕΡΩΤΗΜΑΤΑ ΠΟΥ ΚΑΘΟΔΗΓΟΥΝ ΣΤΗ ΔΙΑΜΟΡΦΩΣΗ ΜΙΑΣ ΕΡΕΥΝΗΤΙΚΗΣ ΠΡΟΤΑΣΗΣ Πρώτη εβδομάδα μαθημάτων:

Η διδασκαλία στο εργαστήριο. Kώστας Χαρίτος - ΔιΧηΝΕΤ

«ΕΙΣΑΓΩΓΗ ΣΤΗ ΜΕΘΟΔΟΛΟΓΙΑ ΤΗΣ ΕΚΠΑΙΔΕΥΤΙΚΗΣ ΕΡΕΥΝΑΣ» Μάθημα 6 «Βασικές μέθοδοι ποιοτικής & μικτής έρευνας»

ΑΥΘΕΝΤΙΚΗ ΑΞΙΟΛΟΓΗΣΗ ΣΤΗΝ ΕΚΠΑΙΔΕΥΤΙΚΗ ΔΙΑΔΙΚΑΣΙΑ. Κατερίνα Κασιμάτη Επίκ. Καθηγήτρια, Γενικό Τμήμα Παιδαγωγικών Μαθημάτων Α.Σ.ΠΑΙ.Τ.Ε.

Εισαγωγή. Χαράλαμπος Καραγιαννίδης. Διάλεξη 1. Εφαρμογές ΤΠ στην ΕΕΑ & Διδακτική της Πληροφορικής.

Αξιολόγηση MULTIMEDIAΛογισμικού

Στάσεις και συνήθειες γονέων με παιδιά μαθητές Λυκείου απέναντι στα φροντιστήρια και την ενισχυτική διδασκαλία. Μάρτιος 2007

Kριτήρια αξιολόγησης, εγκυρότητα, αξιοπιστία, συνέπεια, αντικειμενικότητα, διακριτότητα, πρακτικότητα

Η ΤΡΙΓΩΝΟΠΟΙΗΣΗ ΜΕΣΑ ΑΠΟ

Διαχείριση Έργων Πληροφορικής

ΕΝΙΑΙΟ ΠΛΑΙΣΙΟ ΠΡΟΓΡΑΜΜΑΤΟΣ ΣΠΟΥΔΩΝ

ΕΙΣΗΓΗΣΗ ΤΗΣ ΟΜ.Ε.Α. ΓΙΑ ΤΗΝ ΗΛΕΚΤΡΟΝΙΚΗ ΑΞΙΟΛΟΓΗΣΗ ΤΩΝ ΜΑΘΗΜΑΤΩΝ: ΧΕΙΜΕΡΙΝΟ ΕΞΑΜΗΝΟ ΑΚΑΔ. ΕΤΟΥΣ

ΠΑΝΕΠΙΣΤΗΜΙΟ ΚΥΠΡΟΥ,

Εργαλεία Έρευνας. Α. Αθανασόπουλος

Τεχνικές συλλογής δεδομένων στην ποιοτική έρευνα

Η ΧΡΗΣΗ ΤΩΝ ΨΥΧΟΜΕΤΡΙΚΩΝ ΕΡΓΑΛΕΙΩΝ ΣΤΟΝ ΕΠΑΓΓΕΛΜΑΤΙΚΟ ΠΡΟΣΑΝΑΤΟΛΙΣΜΟ

ΔΙΔΑΚΤΙΚΗ ΤΗΣ ΠΛΗΡΟΦΟΡΙΚΗΣ

ΠΕΡΙΓΡΑΜΜΑ ΜΑΘΗΜΑΤΟΣ. Τμήμα Μηχανικών Οικονομίας και Διοίκησης ΕΠΙΠΕΔΟ ΣΠΟΥΔΩΝ Προπτυχιακό ΚΩΔΙΚΟΣ ΜΑΘΗΜΑΤΟΣ ΓΕ0175 ΕΞΑΜΗΝΟ ΣΠΟΥΔΩΝ 9

Σωτηρίου Σοφία. Εκπαιδευτικός ΠΕ0401, Πειραματικό Γενικό Λύκειο Μυτιλήνης

Χαράλαμπος Καραγιαννίδης

ΦΟΡΜΑ ΑΞΙΟΛΟΓΗΣΗΣ ΣΥΝΘΕΤΙΚΗΣ ΕΡΓΑΣΙΑΣ ΚΑΙ ΣΥΝΟΔΕΥΤΙΚΟΥ ΥΛΙΚΟΥ ΣΤΟ MYPROJECT

(Δεκέμβριος 2015) 1. Ταυτότητα της έρευνας

ΕΡΩΤΗΜΑΤΟΛΟΓΙΑ ΑΞΙΟΛΟΓΗΣΗΣ ΜΑΘΗΣΗΣ-ΔΙΔΑΣΚΑΛΙΑΣ

Εναλλακτικά του πειράματος

Σχολή Πολιτικών Μηχανικών

Χαράλαμπος Καραγιαννίδης

Ποσοτική Έρευνα. Λογιστική Θεωρία και Έρευνα

Transcript:

Διάλεξη 7 Αξιολόγηση Εκπαιδευτικού Λογισμικού Τεχνικές Εφαρμογές ΤΠ στην ΕΕΑ & Διδακτική της Πληροφορικής Χαράλαμπος Καραγιαννίδης karagian@uth.gr Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 1/50 3/5/2017

Σύνοψη μαθήματος 1. Εισαγωγή στο μάθημα 2. Εκπαιδευτικό λογισμικό ορισμοί, κατηγορίες & εξέλιξη 3. Εκπαιδευτική Ρομποτική 4. Εκπαιδευτικό λογισμικό επιδείξεις 5. Ανάπτυξη εκπαιδευτικού λογισμικού μεθοδολογίες 6. Αξιολόγηση εκπαιδευτικού λογισμικού κριτήρια 7. Αξιολόγηση εκπαιδευτικού λογισμικού τεχνικές Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 2/50 3/5/2017

Θυμηθείτε: βασικοί άξονες αξιολόγησης 1. Παιδαγωγική/διδακτική αξιολόγηση 1. διδακτικό περιεχόμενο 2. διδακτική και παιδαγωγική μεθοδολογία 3. σχεδίαση και δόμηση του περιεχομένου 4. διεπιφάνεια χρήσης 5. άλλες δυνατότητες 6. μαθησιακό αποτέλεσμα 2. Τεχνολογική αξιολόγηση 1. τεχνική αρτιότητα 2. λειτουργικότητα 3. συµβατότητα 4. εργαλεία δασκάλου 5. εργαλεία µαθητή 6. υποστήριξη πώς µετράµε τα παραπάνω??? Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 3/50 3/5/2017

Σύνοψη διάλεξης Εισαγωγή Τεχνικές που βασίζονται στη συμμετοχή χρηστών Τεχνικές που βασίζονται στη συμμετοχή εμπειρογνωμόνων Συζήτηση Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 4/50 3/5/2017

Αξιολόγηση Η αξιολόγηση είναι μια πολύ βασική διαδικασία F ειδικά όταν μιλάμε για διαδραστικές εφαρμογές, όπως οι εφαρμογές εκπαιδευτικής τεχνολογίας F γιατί χωρίς την αξιολόγηση δε μπορούμε ποτέ να είμαστε σίγουροι για την επιτυχία μας F αυτό ισχύει σε όλες τις επιστήμες??? Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 5/50 3/5/2017

Τεχνικές αξιολόγησης Υπάρχουν πολλές τεχνικές που κατατάσσονται με βάση διάφορα κριτήρια F ρόλος που διαδραματίζουν στο σχεδιασμό F στόχος που εξυπηρετούν F βαθμός αντικειμενικότητας F τύπος δεδομένων που χρησιμοποιούν και τύπος αποτελεσμάτων που παράγουν F κλπ Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 6/50 3/5/2017

Κατηγοριοποίηση ρόλος & χρόνος Διαμορφωτική αξιολόγηση (formanve) F πραγματοποιείται κατά τη διάρκεια της σχεδίασης και αφορά κυρίως πρωτότυπα χαμηλής ή μεσαίας πιστότητας Συμπερασματική αξιολόγηση (summanve) F πραγματοποιείται στο τέλος της σχεδίασης και αφορά την χρήση του τελικού συστήματος Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 7/50 3/5/2017

Κατηγοριοποίηση στόχος Αναλυτικές τεχνικές F στο εργαστήριο χωρίς συμμετοχή χρηστών Πειραματικές τεχνικές F στο εργαστήριο με χρήστες Διερευνητικές τεχνικές F στο πεδίο με χρήστες Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 8/50 3/5/2017

Κατηγοριοποίηση αντικειμενικότητα Υποκειμενικές F βασίζονται σε υποκειμενικά δεδομένα F εμπειρογνωμόνων ή τελικών χρηστών Αντικειμενικές F κυρίως πειραματικές F βάση αντικειμενικών μετρήσεων Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 9/50 3/5/2017

Κατηγοριοποίηση τύποι δεδομένων Ποιοτικές μέθοδοι F ικανοποίηση Ποσοτικές μέθοδοι F χρόνος εκτέλεσης ενός καθήκοντος Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 10/50 3/5/2017

Σύνοψη διάλεξης Εισαγωγή Τεχνικές που βασίζονται στη συμμετοχή χρηστών Τεχνικές που βασίζονται στη συμμετοχή εμπειρογνωμόνων Συζήτηση Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 11/50 3/5/2017

Αξιολόγηση με χρήστες Οι χρήστες αλληλεπιδρούν με την εφαρμογή F ποιοι: μπορεί να έχουμε διαφορετικούς χρήστες ή ένα focus group F τι κάνουν: η αλληλεπίδραση μπορεί να είναι ελεύθερη, ή να ακολουθεί συγκεκριμένα σενάρια χρήσης F που: η αλληλεπίδραση μπορεί να είναι σε ελεγχόμενο περιβάλλον (π.χ. εργαστήριο) ή σε πραγματικό περιβάλλον F πώς μετράμε: είτε τους παρατηρούμε, είτε τους ρωτάμε (με διάφορες παραλλαγές) Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 12/50 3/5/2017

Ερωτηματολόγια Δοκιμασμένη μέθοδος καταγραφής της αντίδρασης των χρηστών Σε αντίθεση με τη συνέντευξη, λιγότερο ευέλικτη, αφού οι ερωτήσεις είναι καταγραμμένες και δεν μπορούν να αλλάξουν κατά περίπτωση Η διαχείριση ερωτηματολογίων και η συναγωγή συμπερασμάτων είναι πολύ πιο εύκολη Ένα ερωτηματολόγιο πρέπει να διαχυθεί σε μεγάλο πλήθος υποκειμένων Η ευκρίνεια στη διατύπωση των ερωτήσεων είναι βασικό χαρακτηριστικό των ερωτηματολογίων Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 13/50 3/5/2017

Αρχές κατασκευής ερωτηματολογίων Ένα καλό ερωτηματολόγιο θα πρέπει να έχει (Nielsen) F 20-40 ερωτήσεις F βάθος ερωτήσεων F πληρότητα F ανεξαρτησία (στις ερωτήσεις) F ισορροπία F απλό, κατανοητό, μη χρονοβόρο Πριν την χρήση του ελέγχεται μέσω κυκλοφορίας του σε ένα δείγμα χρηστών F trial run Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 14/50 3/5/2017

Τύποι ερωτήσεων Ανοικτές ερωτήσεις π.χ. Κατά την γνώμη σας τα μηνύματα λάθους είναι ευκολονόητα; Κλειστές ερωτήσεις Χρησιμοποιείτε τα Πλήκτρα λειτουργιών (funcnon keys) ; πάντα [ ] συχνά [ ] σπάνια [ ] ποτέ [ ] Προκαθορισμένη κλίμακα πολλαπλών σημείων (mulnpoint scale) Παρέχονται επεξηγήσεις κατά την εγκατάσταση του λογισμικού: καθόλου -2-1 0 1 2 συνεχώς Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 15/50 3/5/2017

Τύποι ερωτήσεων (2/2) Πίνακες Σημασιολογικών Αποχρώσεων (Semannc Differennals) F Κυκλώστε τον αριθμό που ταιριάζει καλύτερα στην άποψη σας για τη διεπιφάνεια: Απλή 3 2 1 0 1 2 3 Σύνθετη Αξιόπιστη 3 2 1 0 1 2 3 Αναξιόπιστη Ελκυστική 3 2 1 0 1 2 3 Απωθητική Κλίμακα Likert F Πιστεύω ότι οι υπολογιστές μπορούν να παίξουν σημαντικό ρόλο στην εκπαίδευση Συμφωνώ έντονα [ ] Συμφωνώ [ ] Συμφωνώ (επιφύλαξη) [ ] Ουδέτερος [ ] Διαφωνώ ελαφρά [ ] Διαφωνώ [ ] Διαφωνώ έντονα [ ] Κατάταξη αντικειμένων F Κατατάξτε τις παρακάτω λειτουργίες με βάση τη χρησιμότητα τους: (κλίμακα από 1-4, με 1 την πιο χρήσιμη λειτουργία: PASTE [ ] DUPLICATE [ ] GROUP [ ] CLEAR [ ] Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 16/50 3/5/2017

Χαρακτηριστικά Πλεονεκτήματα F εύκολη ανάλυση των αποτελεσμάτων Μειονεκτήματα F καταγράφεται η υποκειμενική άποψη των χρηστών για την εφαρμογή F πολλές φορές οι χρήστες εκφράζουν θετικές ή αρνητικές κρίσεις όχι επειδή αυτό προκύπτει από την προσωπική τους εμπειρία, αλλά για άλλους λόγους F ο κίνδυνος αυτός μειώνεται όταν το πλήθος των υποκειμένων είναι μεγάλο F συχνά οι χρήστες δεν επιθυμούν να συμπληρώσουν το ερωτηματολόγιο Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 17/50 3/5/2017

Συνέντευξη Άμεση δομημένη μέθοδος αξιολόγησης συστήματος F ιδιαίτερα χρήσιμη μέθοδος μετά την επίσημη αξιολόγηση ή όταν τα ερωτήματα είναι σύνθετα F κατά την διάρκεια μιας συνέντευξης οι απαντήσεις καταγράφονται από το μελετητή Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 18/50 3/5/2017

Συνέντευξη (2/2) Δομή F συνήθως ιεραρχική δομή, αρχίζοντας με καταγραφή της γενικής εντύπωσης του χρήστη για την εφαρμογή και να επικεντρώνεται στη συνέχεια σταδιακά σε πιο ειδικά θέματα F οι ερωτήσεις μιας συνέντευξης συνήθως είναι δομημένες ώστε να είναι δυνατή η συγκριτική αξιολόγηση μιας εφαρμογής σε σχέση με άλλες παρόμοιες Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 19/50 3/5/2017

Χαρακτηριστικά Πλεονέκτημα F ευελιξία και δυνατότητα καταγραφής λεπτομερώς απόψεων χρηστών έναντι της εφαρμογής Μειονεκτήματα F εγγενής δυσκολία ανάλυσης και σύγκρισης του υλικού και συναγωγή γενικών συμπερασμάτων Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 20/50 3/5/2017

Focus group Μικρός αριθμός χρηστών με ένα αναλυτή δουλεύουν σε ένα πρωτότυπο Τυπικές ερωτήσεις F περιγράψτε την εμπειρία σας F υπάρχει κάτι που προσπαθήσατε χωρίς επιτυχία? Χρήσιμη μέθοδος για την καταγραφή προτιμήσεων Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 21/50 3/5/2017

Παρατήρηση πεδίου Παρατήρηση των χρηστών στο φυσικό χώρο όπου επιτελούν το έργο τους Βιντεοσκόπηση Πλούσιο υλικό και δεδομένα Η χρησιμότητα των παρατηρήσεων πεδίου είναι διαφορετικού χαρακτήρα από τα συμπεράσματα των εργαστηριακών μεθόδων Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 22/50 3/5/2017

Παρατήρηση πεδίου (2/2) Πλεονεκτήματα F το στοιχείο ελέγχου λιγότερο έντονο στην παρατήρηση πεδίου F μεγαλύτερη φυσικότητα ενεργειών του χρήστη, εντονότερο ομαδικό πνεύμα στη δράση του, αφού βρίσκεται σε γνωστό τόπο με γνωστά μέλη ομάδας Μειονεκτήματα F λιγότερη ποσοτική καταγραφή ενεργειών, πιθανόν οι συνθήκες καταγραφής να μην είναι απόλυτα ικανοποιητικές Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 23/50 3/5/2017

Ελεγχόμενη πειραματική λειτουργία Κλασική τεχνική αξιολόγησης λογισμικού που παρέχει ποσοτικές μετρήσεις της απόδοσης του συστήματος όταν οι χρήστες εκτελούν προκαθορισμένες εργασίες F οι μετρήσεις γίνονται σε εργαστήρια, σε συνθήκες που προσομοιάζουν τις συνθήκες πραγματικής λειτουργίας F τα ποσοτικά δεδομένα είναι χρήσιμα όταν ελέγχουμε την απόδοση συστήματος συγκριτικά με κάποιο άλλο ή έναντι προ-καθορισμένου στόχου απόδοσης F τα πειράματα μπορούν να συνδυάζονται με ποιοτικού χαρακτήρα μετρήσεις και παρατηρήσεις, όπως συνεντεύξεις ή ερωτηματολόγια Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 24/50 3/5/2017

Εργαστήριο ευχρηστίας λογισμικού Παράθυρο παρατήρησης Καταγραφικός εξοπλισμός Χώρος Λογισμικό καταγραφής συμβάντων παρατήρησης Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 25/50 3/5/2017

Microso usability labs Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 26/50 3/5/2017

Sun usability labs Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 27/50 3/5/2017

Διαδικασία Ορισμός στόχων πειράματος Διεξαγωγή πειράματος - προσοχή στους κανόνες δεοντολογίας F π.χ. στις βιντεοσκοπήσεις F επεξήγηση πριν το πείραμα F δυνατότητα διακοπής του πειράματος F αποφυγή διακοπών (τηλεφωνημάτων) κατά το πείραμα F μη αναγνώριση του υποκειμένου μετά το πείραμα Ανάλυση αποτελεσμάτων και συμπεράσματα Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 28/50 3/5/2017

Πρωτόκολλο ομιλούντων υποκειμένων (think aloud protocol) Οι χρήστες εκφράζουν μεγαλόφωνα τις σκέψεις, απόψεις και συναισθήματά τους ενώ αλληλεπιδρούν με το σύστημα F απαιτεί σχετικά λίγους πόρους, κι έχει αποδειχθεί ιδιαίτερα αποτελεσματική Γνωστές παραλλαγές F πρωτόκολλο κρίσιμης απόκρισης (crincal response): ο χρήστης εκφέρει άποψη μεγαλόφωνα μόνο κατά τη διάρκεια προκαθορισμένης εργασίας, τμήματος του όλου έργου F πρωτόκολλο περιοδικής καταγραφής (periodic report): ο χρήστης περιγράφει μεγαλόφωνα τη σκέψη του μόνο αφού εκτελέσει ένα συγκεκριμένο έργο, ώστε να μην διαταράσσεται η ομαλή εκτέλεση του έργου Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 29/50 3/5/2017

Ομιλούντα υποκείμενα πλεονεκτήματα Ο αξιολογητής συνάγει συμπεράσματα για το νοητικό μοντέλο του χρήστη Αν η ακολουθία ενεργειών του χρήστη είναι διαφορετική από την αναμενόμενη για την εκτέλεση του έργου, συνάγεται ότι το σύστημα δεν είναι αρκετά σαφές Γίνεται η καταγραφή της ορολογίας που ο χρήστης χρησιμοποιεί, ώστε να ελεγχθεί αν αυτή είναι σε αντιστοιχία με αυτή που έχει χρησιμοποιηθεί στα εγχειρίδια και στη διεπαφή του συστήματος Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 30/50 3/5/2017

Ομιλούντα υποκείμενα μειονεκτήματα Η μεγαλόφωνη έκφρασης σκέψεων ίσως διαταράσσει τη συγκέντρωση του χρήστη F π.χ. μαθητής μικρής ηλικίας που προσπαθεί να λύσει ένα δύσκολο πρόβλημα Είναι δύσκολο σε πεπειραμένους χρήστες να εκφράσουν όλες τις σκέψεις τους αφού έχουν αυτοματοποιήσει πολλές ενέργειες τους Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 31/50 3/5/2017

Καταγραφή ενεργειών υποκειμένων Σημειώσεις αξιολογητή F λιγότερο δαπανηρή μέθοδος Ηχογράφηση υποκειμένων F χρήσιμη σε πρωτόκολλα της κατηγορίας "ομιλούντων υποκειμένων" F χαμηλή πληροφορία άλλης μορφής Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 32/50 3/5/2017

Καταγραφή ενεργειών υποκειμένων (2/2) Βιντεοσκόπηση υποκειμένων F απώλεια λεπτομέρειας όπως εκφράσεις προσώπου, κλπ, που καταγράφονται μόνο με κοντινότερη λήψη F ανάγκη συγχρονισμού με εικόνα από την οθόνη Καταγραφή συμβάντων στον υπολογιστή (computer logging) F καταγραφή σε επίπεδο πληκτρολόγησης, υλικό μεγάλου όγκου, οπότε η ανάλυση τους είναι ιδιαίτερα επίπονη διαδικασία Καταγραφή συμβάντων από τους χρήστες F υποκειμενικού χαρακτήρα Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 33/50 3/5/2017

Άλλοι τρόποι? Αφού μιλάμε για εκπαίδευση, το απόλυτο μέγεθος είναι τι έμαθαν οι χρήστες μας F διαφορά μεταξύ pre- and post-tests F μηχανιστική αλλά μετρίσιμη μέθοδος F μας λέει αν πετύχαμε, αλλά δε μας λέει τι πήγε λάθος αν δεν πετύχαμε Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 34/50 3/5/2017

Σύνοψη διάλεξης Εισαγωγή Τεχνικές που βασίζονται στη συμμετοχή χρηστών Τεχνικές που βασίζονται στη συμμετοχή εμπειρογνωμόνων Συζήτηση Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 35/50 3/5/2017

Expert-based evaluanon Η αξιολόγηση γίνεται από ένα ή περισσότερους εμπειρογνώμονες F αλληλεπιδρούν με την εφαρμογή F καταγράφουν τη γνώμη τους F διαβουλεύονται με τους υπόλοιπους εμπειρογνώμονες F καταθέτουν μια συνολική αναφορά Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 36/50 3/5/2017

Διαδικασία Προετοιμασία (preparanon) F προηγείται ένα γρήγορο πέρασμα F δίνεται έντυπο υλικό (ίσως για κάθε κανόνα) Εκτέλεση F βαθμολογούν όλοι τα προβλήματα (0-4) F δείκτες κρισιμότητας / σπουδαιότητας των προβλημάτων F συγκεντρώνονται και ομαδοποιούνται τα σχόλια Διαβούλευση F συγκέντρωση αξιολογητών ανταλλαγή απόψεων F σύνταξη αναφοράς Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 37/50 3/5/2017

Σύνοψη της μεθόδου Ιδιαίτερα δημοφιλής μέθοδος Είναι φθηνή (δεν κοστίζει σε χρόνο, χρήμα, κλπ) Βασίζεται στη γνώση εμπειρογνωμόνων Το ποσοστό σφαλμάτων που εντοπίζονται είναι κατά μεγάλο Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 38/50 3/5/2017

Γνωσιακό περιδιάβασμα Τεχνική διαμορφωτικής αξιολόγησης F η αξιολόγηση αφορά τη συσχέτιση των στόχων του χρήστη και των αποκρίσεων του συστήματος στα πλαίσια συγκεκριμένων σεναρίων χρήσης Στάδια F στάδιο προετοιμασίας F στάδιο επαναληπτικών ερωτήσεων ή ελέγχου F σύνοψη αποτελεσμάτων Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 39/50 3/5/2017

Στάδιο προετοιμασίας Ο αξιολογητής F προσδιορίζει τυπικούς χρήστες F ορίζει τυπικές εργασίες χρηστών F καθορίζει τυπικές σωστές ακολουθίες ενεργειών για κάθε εργασία χρήστη Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 40/50 3/5/2017

Στάδιο ελέγχου & αποτελέσματα Για κάθε ενέργεια του χρήστη ελέγχεται κατά πόσο F Ε1: η επόμενη σωστή ενέργεια γίνεται σαφής στον χρήστη; F Ε2: ο χρήστης μπορεί να συνδέσει την περιγραφή της σωστής ενέργειας με τον στόχο του; F Ε3: ο χρήστης καταλαβαίνει σωστά την απόκριση του συστήματος, δηλαδή θα του είναι κατανοητό αν έχει κάνει σωστή ή λάθος επιλογή; Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 41/50 3/5/2017

Ομάδα εμπειρογνωμόνων Ειδικός στο περιεχόμενο επιστημονική ορθότητα: περιεχομένου, αναπαραστάσεων, παιδαγωγικών πόρων (π.χ. ασκήσεων) Ειδικός στην παιδαγωγική (δάσκαλος, καθηγητής, κλπ) διδακτική σχεδίαση, καταλληλότητα για χρήση σε εκπαιδευτικό πλαίσιο Ειδικός στην πληροφορική τεχνική αρτιότητα: standards, απόδοση, αξιοπιστία, απουσία λαθών Ειδικός στην αλληλεπίδραση ευχρηστία, εμπειρία χρήσης Ειδικός στην εκπαιδευτική τεχνολογία κλπ, κλπ, κλπ Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 42/50 3/5/2017

Χαρακτηριστικά Πλεονεκτήματα F χαμηλό κόστος (σε χρόνο, χρήμα, κλπ) F εύκολη ανάλυση (αφού όλοι οι εμπειρογνώμονες διερευνούν τα ίδια κριτήρια, με βάση τα ίδια σενάρια, κλπ) Μειονεκτήματα F οι τελικοί χρήστες (εκπαιδευόμενοι) μπορούν να δώσουν περισσότερες πληροφορίες??? Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 43/50 3/5/2017

Σύνοψη διάλεξης Εισαγωγή Τεχνικές που βασίζονται στη συμμετοχή χρηστών Τεχνικές που βασίζονται στη συμμετοχή εμπειρογνωμόνων Συζήτηση Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 44/50 3/5/2017

Συμπεράσματα Η αξιολόγηση είναι πολύ βασική διαδικασία F αλλιώς πηγαίνουμε στα τυφλά Υπάρχουν πολλές τεχνικές F κάθε μία με διαφορετικά χαρακτηριστικά, αποτελέσματα και κόστος Πώς επιλέγουμε? F ανάλογα με τις συνθήκες Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 45/50 3/5/2017

Τι περιλαμβάνει η αξιολόγηση? 1. evaluanon plan 2. data collecnon 3. data analysis Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 46/50 3/5/2017

Τι θα κάνετε εσείς στην εργασία? Θα αξιολογήσετε ως εμπειρογνώμονες ένα εκπαιδευτικό λογισμικό 1. θα επιλέξετε το λογισμικό 2. θα επιλέξετε τα κριτήρια αξιολόγησης 3. θα αξιολογήσετε την εφαρμογή για κάθε κριτήριο Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 47/50 3/5/2017

Τι θα πρέπει να προσέξουμε??? Ethics of evaluanon F οι χρήστες που συμμετέχουν πρέπει να το γνωρίζουν F η διαδικασία πρέπει να είναι δυνατό να επαναληφθεί F κλπ, κλπ, κλπ Αξιοπιστία της αξιολόγησης F σας αρέσει το μάθημα? J Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 48/50 3/5/2017

Βιβλιογραφία Ακουμιανάκης Δ., Διεπαφή Χρήστη-Υπολογιστή: Μια Σύγχρονη Προσέγγιση, Εκδόσεις Κλειδάριθμος, 2006. Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 49/50 3/5/2017

Καλό απόγευμα karagian@uth.gr Διάλεξη 7: Αξιολόγηση ΕΛ - Τεχνικές 50/50 3/5/2017