Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect

Η αναγνώριση λέξεων της νοηματικής γλώσσας είναι ένα απαιτητικό πρόβλημα τόσο στην περίπτωση που αναγνωρίζονται συνεχόμενες λέξεις (επικοινωνία) όσο και στην περίπτωση αναγνώρισης μίας διακριτής λέξης (μετάφραση). Στην παρούσα διπλωματική εργασία σχεδιάστηκε, αναπτύχθηκε και αξιολογήθηκε ένα σύστημα...

Πλήρης περιγραφή

Αποθηκεύτηκε σε:
Λεπτομέρειες βιβλιογραφικής εγγραφής
Κύριος συγγραφέας: Γκιγκέλος, Νικόλαος
Άλλοι συγγραφείς: Γκουμόπουλος, Χρήστος
Γλώσσα:el_GR
Δημοσίευση: 2017
Θέματα:
Διαθέσιμο Online:http://hdl.handle.net/11610/17559
Ετικέτες: Προσθήκη ετικέτας
Δεν υπάρχουν, Καταχωρήστε ετικέτα πρώτοι!
Περιγραφή
Περίληψη:Η αναγνώριση λέξεων της νοηματικής γλώσσας είναι ένα απαιτητικό πρόβλημα τόσο στην περίπτωση που αναγνωρίζονται συνεχόμενες λέξεις (επικοινωνία) όσο και στην περίπτωση αναγνώρισης μίας διακριτής λέξης (μετάφραση). Στην παρούσα διπλωματική εργασία σχεδιάστηκε, αναπτύχθηκε και αξιολογήθηκε ένα σύστημα που μπορεί να αναγνωρίσει διακριτές λέξεις της ελληνικής νοηματικής γλώσσας χρησιμοποιώντας την τεχνολογία Kinect. Ο αισθητήρας της συσκευής Kinect καταγράφει τη 3D τροχιά κίνησης των χεριών και ένα σύνολο από χαρακτηριστικά από τις αρθρώσεις του ατόμου τα οποία χρησιμοποιούνται από έναν ταξινομητή ώστε να αναγνωριστεί η λέξη εισόδου. Επίσης, γίνεται κανονικοποίηση χρησιμοποιώντας τον dynamic time warping αλγόριθμο για την ευθυγράμμιση της λέξης εισόδου με τις λέξεις που είναι αποθηκευμένες στο σύστημα πριν γίνει η τελική αντιστοίχιση με την τεχνική Nearest-Neighbor. Το χαμηλό υπολογιστικό κόστος των αλγορίθμων που χρησιμοποιούνται επιτρέπουν τη χρήση του συστήματος με αναγνώριση σε πραγματικό χρόνο. Το σύστημα αξιολογήθηκε με δείγμα 5 ατόμων και μπορεί να αναγνωρίζει 15 λέξεις της ελληνικής νοηματικής γλώσσας. Δοκιμάστηκαν διαφορετικές ρυθμίσεις και το καλύτερο ποσοστό που επιτεύχθηκε είναι 99.33%.