Ευχρηστία ιστοτόπων: Η επίδραση του σχεδιαστή στην ανάλυση δεδομένων ταξινόμησης καρτών ανοικτού τύπου
Creators: name: Παπαστεφάνου, Φώτιος Κωνσταντίνου
Publisher: name: Aristotle University of Thessaloniki
Year: 2022
Subjects: Ευχρηστία ιστοτόπων
Επίδραση του σχεδιαστή
Ταξινόμηση καρτών
Website usability
Designer effect
Card sorting

description: Το φαινόμενο της επίδρασης του αξιολογητή (evaluator effect) είναι καταγεγραμμένο στη βιβλιογραφία σε διάφορες μεθόδους αξιολόγησης της ευχρηστίας διαδραστικών συστημάτων όπως γνωσιακό περιδιάβασμα, ευρετική αξιολόγηση και πειράματα μέτρησης απόδοσης. Σύμφωνα με το συγκεκριμένο φαινόμενο, διαφορετικοί αξιολογητές τείνουν να εντοπίζουν διαφορετικά προβλήματα ευχρηστίας, κατά την εφαρμογή της ίδιας τεχνικής αξιολόγησης, στο ίδιο σύστημα, με βάση τα ίδια δεδομένα ευχρηστίας. Στόχος της εργασίας είναι να διερευνηθεί η αντίστοιχη επίδραση του ατόμου που αναλύει τα αποτελέσματα από μια τεχνική σχεδίασης διαδραστικών συστημάτων, στο οποίο η πτυχιακή αυτή θα αναφέρεται ως η επίδραση του σχεδιαστή (designer effect). Ως μελέτη περίπτωσης, επιλέχθηκε η πλέον δημοφιλής μέθοδος για τη σχεδίαση της πληροφοριακής αρχιτεκτονικής ιστοτόπων, η ταξινόμηση καρτών. Το σύνολο δεδομένων που αναλύθηκε αποτελείται από τα αποτελέσματα που παρήγαγαν 121 αρχάριοι σχεδιαστές, μοιρασμένοι σε τέσσερις διαφορετικούς ιστοχώρους. Οι σχεδιαστές ανέλυσαν τα δεδομένα ταξινόμησης καρτών τόσο σε ατομικό επίπεδο όσο και σε ομάδες των τριών ατόμων. Η μετρική της απόστασης επεξεργασίας (edit distance) χρησιμοποιήθηκε για τη σύγκριση των ομάδων περιεχομένου (ομαδοποιήσεις) που πρότειναν οι σχεδιαστές. Η μετρική αυτή ορίζεται ως ο αριθμός των μεταθέσεων που απαιτούνται ώστε μία ομαδοποίηση να ταυτιστεί με μία άλλη. Δύο ίδιες ομαδοποιήσεις έχουν απόσταση μηδέν. Όσο η απόσταση τείνει στο μηδέν, δύο ομαδοποιήσεις είναι αρκετά κοντά, ενώ όσο μεγαλύτερη η τιμή της απόστασης, τόσο διαφορετικότερες είναι μεταξύ τους δύο ομαδοποιήσεις. Αναπτύχθηκε κώδικας σε γλώσσα Python για τον υπολογισμό των αποστάσεων μεταξύ των ομαδοποιήσεων. Ο κώδικας εφαρμόστηκε στις ατομικές ομαδοποιήσεις κάθε ιστοτόπου, στις ομαδικές ομαδοποιήσεις και τέλος έγινε σύγκριση των ομαδικών ομαδοποιήσεων με τις ατομικές ομαδοποιήσεις των μελών της κάθε ομάδας. Η ανάλυση των δεδομένων έδειξε ότι υπάρχει απόσταση μεταξύ των ομαδοποιήσεων και κατά συνέπεια, διαπιστώνεται το φαινόμενο του σχεδιαστή στην εφαρμογή της μεθόδου ταξινόμησης καρτών ανοικτού τύπου.
description: The evaluator effect has been well established and documented in the scientific literature for various usability evaluation methods of interactive systems, like cognitive walkthrough, heuristic evaluation, and user testing. According to the evaluator effect, different evaluators tend to discover different usability issues, while applying the same evaluation technique, on the same system, given the same usability data. The goal of this thesis is to explore the corresponding effect of the individual who is analyzing the output of a specific design technique of an interactive system. This thesis refers to this effect as the designer effect. The card sorting method was selected as a case study, due to its popularity for designing information architectures. The dataset that was analyzed was comprised of the output produced by 121 novice designers, allocated to four distinct websites. The designers applied the open card sorting method individually, as well as in groups of three. The edit distance metric was used to compare the produced content groupings and determine their degree of similarity. This metric expresses the number of permutations required in order to make two different groupings identical. Two identical groupings have an edit distance value of zero, while the greater the edit distance value between two groupings, the greater the dissimilarity of the groupings is. The edit distance between the groupings was calculated by a custom-built Python program. This analysis program was applied on the individual designer’s groupings, as well as the team groupings. Results found that there is a measurable distance between the various groupings, hence verifying the designer effect in the open card sorting method.