Employing binocular eye tracking for the control of a custom-made immersive multimedia user interface (MUI) in Unity3D

Abstract

Αντικείμενο της διπλωματικής εργασίας είναι μια πρωτοποριακή προσέγγιση για την σχεδίαση μιας διεπαφής χρήστη με υποστήριξη ακολουθίας ματιών για μοντέρνες και στερεοσκοπικές πλατφόρμες. Η ευρεία ανάπτυξη και διαθεσιμότητα των φορητών συσκευών απεικόνισης Εικονικής Πραγματικότητας στους καταναλωτές όπως το Oculus RiftTM οδήγησε στην ένταξη της Εικονικής Πραγματικότητας ολοένα και περισσότερο στην καθημερινότητα μας. Ωστόσο, η εμβύθιση ενός χρήστη σε ένα περιβάλλον Εικονικής Πραγματικότητας(VR) απαιτεί νέες τεχνικές και κανόνες αλληλεπίδρασης μεταξύ χρήστη και των πρωτοεμφανιζόμενων διεπαφών τριών διαστάσεων(3D). Οι ήδη υπάρχουσες δυο διαστάσεων(2D) διεπαφές χρηστών είναι σχεδιασμένες έτσι ώστε να επιτρέπεται η χρήση τους μέσω μιας οθόνης τοποθετημένης σε στατική θέση, όπως η οθόνη του Η/Υ, και όχι να τις βιώσουν οπτικά οι χρήστες στις τρεις διαστάσεις του πλάτους, ύψους και βάθους. Επομένως, η αλληλεπίδραση του χρήστη με τον ψηφιακό κόσμο χρησιμοποιώντας τα παραδοσιακά περιφερειακά συστημάτων όπως του πληκτρολογίου και του ποντικιού καθίσταται αν όχι σχεδόν αδύνατη αρκετά παράξενη και δύσκολη. Παρουσιάζουμε λοιπόν, μια τρισδιάστατη διεπαφή πολυμέσων βασιζόμενη στην ακολουθία ματιών για την αλληλεπίδραση και αναπτύξαμε έξι εφαρμογές που καλύπτουν καθημερινές ανάγκες; από τη σύνταξη και αποστολή ηλεκτρονικής αλληλογραφίας και διαχείριση πολυμέσων εικόνας, ήχου και αρχείων μέχρι και gaming. Η αξιολόγηση του συστήματός μας έγινε μέσω πειραμάτων με πραγματικούς χρήστες και μέσω της ανάλυσης των δεδομένων, ποσοτικών και ποιοτικών, αποφάνθηκε πως οι χρήστες ενθουσιάστηκαν και διευκολύνθηκαν πολύ περισσότερο διαχειρίζοντας την διεπαφή “οπτικά” σε αντίθεση με τη χρήση πληκτρολογίου καθώς επίσης παρατηρήθηκαν λιγότερα τυπογραφικά λάθη.