Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect

Η αναγνώριση λέξεων της νοηματικής γλώσσας είναι ένα απαιτητικό πρόβλημα τόσο στην περίπτωση που αναγνωρίζονται συνεχόμενες λέξεις (επικοινωνία) όσο και στην περίπτωση αναγνώρισης μίας διακριτής λέξης (μετάφραση). Στην παρούσα διπλωματική εργασία σχεδιάστηκε, αναπτύχθηκε και αξιολογήθηκε ένα σύστημα...

Full description

Saved in:
Bibliographic Details
Main Author: Γκιγκέλος, Νικόλαος
Other Authors: Γκουμόπουλος, Χρήστος
Language:el_GR
Published: 2017
Subjects:
Online Access:http://hdl.handle.net/11610/17559
Tags: Add Tag
No Tags, Be the first to tag this record!
Description
Summary:Η αναγνώριση λέξεων της νοηματικής γλώσσας είναι ένα απαιτητικό πρόβλημα τόσο στην περίπτωση που αναγνωρίζονται συνεχόμενες λέξεις (επικοινωνία) όσο και στην περίπτωση αναγνώρισης μίας διακριτής λέξης (μετάφραση). Στην παρούσα διπλωματική εργασία σχεδιάστηκε, αναπτύχθηκε και αξιολογήθηκε ένα σύστημα που μπορεί να αναγνωρίσει διακριτές λέξεις της ελληνικής νοηματικής γλώσσας χρησιμοποιώντας την τεχνολογία Kinect. Ο αισθητήρας της συσκευής Kinect καταγράφει τη 3D τροχιά κίνησης των χεριών και ένα σύνολο από χαρακτηριστικά από τις αρθρώσεις του ατόμου τα οποία χρησιμοποιούνται από έναν ταξινομητή ώστε να αναγνωριστεί η λέξη εισόδου. Επίσης, γίνεται κανονικοποίηση χρησιμοποιώντας τον dynamic time warping αλγόριθμο για την ευθυγράμμιση της λέξης εισόδου με τις λέξεις που είναι αποθηκευμένες στο σύστημα πριν γίνει η τελική αντιστοίχιση με την τεχνική Nearest-Neighbor. Το χαμηλό υπολογιστικό κόστος των αλγορίθμων που χρησιμοποιούνται επιτρέπουν τη χρήση του συστήματος με αναγνώριση σε πραγματικό χρόνο. Το σύστημα αξιολογήθηκε με δείγμα 5 ατόμων και μπορεί να αναγνωρίζει 15 λέξεις της ελληνικής νοηματικής γλώσσας. Δοκιμάστηκαν διαφορετικές ρυθμίσεις και το καλύτερο ποσοστό που επιτεύχθηκε είναι 99.33%.