| _version_ |
1828461165921959936
|
| author |
Γκιγκέλος, Νικόλαος
|
| author2 |
Γκουμόπουλος, Χρήστος
|
| author_facet |
Γκουμόπουλος, Χρήστος
Γκιγκέλος, Νικόλαος
|
| author_sort |
Γκιγκέλος, Νικόλαος
|
| collection |
DSpace
|
| description |
Η αναγνώριση λέξεων της νοηματικής γλώσσας είναι ένα απαιτητικό πρόβλημα τόσο στην περίπτωση που αναγνωρίζονται συνεχόμενες λέξεις (επικοινωνία) όσο και στην περίπτωση αναγνώρισης μίας διακριτής λέξης (μετάφραση). Στην παρούσα διπλωματική εργασία σχεδιάστηκε, αναπτύχθηκε και αξιολογήθηκε ένα σύστημα που μπορεί να αναγνωρίσει διακριτές λέξεις της ελληνικής νοηματικής γλώσσας χρησιμοποιώντας την τεχνολογία Kinect. Ο αισθητήρας της συσκευής Kinect καταγράφει τη 3D τροχιά κίνησης των χεριών και ένα σύνολο από χαρακτηριστικά από τις αρθρώσεις του ατόμου τα οποία χρησιμοποιούνται από έναν ταξινομητή ώστε να αναγνωριστεί η λέξη εισόδου. Επίσης, γίνεται κανονικοποίηση χρησιμοποιώντας τον dynamic time warping αλγόριθμο για την ευθυγράμμιση της λέξης εισόδου με τις λέξεις που είναι αποθηκευμένες στο σύστημα πριν γίνει η τελική αντιστοίχιση με την τεχνική Nearest-Neighbor. Το χαμηλό υπολογιστικό κόστος των αλγορίθμων που χρησιμοποιούνται επιτρέπουν τη χρήση του συστήματος με αναγνώριση σε πραγματικό χρόνο. Το σύστημα αξιολογήθηκε με δείγμα 5 ατόμων και μπορεί να αναγνωρίζει 15 λέξεις της ελληνικής νοηματικής γλώσσας. Δοκιμάστηκαν διαφορετικές ρυθμίσεις και το καλύτερο ποσοστό που επιτεύχθηκε είναι 99.33%.
|
| id |
oai:hellanicus.lib.aegean.gr:11610-17559
|
| institution |
Hellanicus
|
| language |
el_GR
|
| publishDate |
2017
|
| record_format |
dspace
|
| spelling |
oai:hellanicus.lib.aegean.gr:11610-175592021-03-09T13:20:15Z Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect Γκιγκέλος, Νικόλαος Γκουμόπουλος, Χρήστος Spherical coordinates Algorithm Classifier Evaluation Kinect Νοηματική γλώσσα Αλγόριθμος Αξιολόγηση Kinect (Programmable controller) (URL: http://id.loc.gov/authorities/subjects/sh2013000151) Algorithms (URL: http://id.loc.gov/authorities/subjects/sh85003487) Word recognition (URL: http://id.loc.gov/authorities/subjects/sh85148114) Sign language (URL: http://id.loc.gov/authorities/subjects/sh85122390) Classifiers (URL: http://id.loc.gov/authorities/subjects/sh99005054) Η αναγνώριση λέξεων της νοηματικής γλώσσας είναι ένα απαιτητικό πρόβλημα τόσο στην περίπτωση που αναγνωρίζονται συνεχόμενες λέξεις (επικοινωνία) όσο και στην περίπτωση αναγνώρισης μίας διακριτής λέξης (μετάφραση). Στην παρούσα διπλωματική εργασία σχεδιάστηκε, αναπτύχθηκε και αξιολογήθηκε ένα σύστημα που μπορεί να αναγνωρίσει διακριτές λέξεις της ελληνικής νοηματικής γλώσσας χρησιμοποιώντας την τεχνολογία Kinect. Ο αισθητήρας της συσκευής Kinect καταγράφει τη 3D τροχιά κίνησης των χεριών και ένα σύνολο από χαρακτηριστικά από τις αρθρώσεις του ατόμου τα οποία χρησιμοποιούνται από έναν ταξινομητή ώστε να αναγνωριστεί η λέξη εισόδου. Επίσης, γίνεται κανονικοποίηση χρησιμοποιώντας τον dynamic time warping αλγόριθμο για την ευθυγράμμιση της λέξης εισόδου με τις λέξεις που είναι αποθηκευμένες στο σύστημα πριν γίνει η τελική αντιστοίχιση με την τεχνική Nearest-Neighbor. Το χαμηλό υπολογιστικό κόστος των αλγορίθμων που χρησιμοποιούνται επιτρέπουν τη χρήση του συστήματος με αναγνώριση σε πραγματικό χρόνο. Το σύστημα αξιολογήθηκε με δείγμα 5 ατόμων και μπορεί να αναγνωρίζει 15 λέξεις της ελληνικής νοηματικής γλώσσας. Δοκιμάστηκαν διαφορετικές ρυθμίσεις και το καλύτερο ποσοστό που επιτεύχθηκε είναι 99.33%. Sign language recognition is a challenging problem both when tracking continuous signs (communication mode) or single words (translation mode). We have developed a system that can recognize Greek sign language vocabulary in translation mode using Kinect technology. The sensor captures the 3D hands movement trajectory and then a set of features in the form of persons’ body joints are fed to a classifier to recognize the input sign. Normalization is used to align test and stored trajectories using the dynamic time warping algorithm before matching is done using the Nearest-Neighbor approach. The low computational complexity of the involved algorithms allows for building a system with real-time response times. The system was evaluated with a sample of 5 individuals and is capable of recognizing 15 signs of the Greek sign language. Different configurations were tested and the best accuracy achieved was 99.33%. 2017-10-30T12:20:19Z 2017-10-30T12:20:19Z 2017-09 http://hdl.handle.net/11610/17559 el_GR Αναφορά Δημιουργού - Μη Εμπορική Χρήση - Παρόμοια Διανομή 4.0 Διεθνές http://creativecommons.org/licenses/by-nc-sa/4.0/ 96 σ. application/pdf Σάμος
|
| spellingShingle |
Spherical coordinates
Algorithm
Classifier
Evaluation
Kinect
Νοηματική γλώσσα
Αλγόριθμος
Αξιολόγηση
Kinect (Programmable controller) (URL: http://id.loc.gov/authorities/subjects/sh2013000151)
Algorithms (URL: http://id.loc.gov/authorities/subjects/sh85003487)
Word recognition (URL: http://id.loc.gov/authorities/subjects/sh85148114)
Sign language (URL: http://id.loc.gov/authorities/subjects/sh85122390)
Classifiers (URL: http://id.loc.gov/authorities/subjects/sh99005054)
Γκιγκέλος, Νικόλαος
Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect
|
| title |
Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect
|
| title_full |
Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect
|
| title_fullStr |
Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect
|
| title_full_unstemmed |
Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect
|
| title_short |
Αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του Kinect
|
| title_sort |
αναγνώριση λέξεων της ελληνικής νοηματικής γλώσσας με τη χρήση του kinect
|
| topic |
Spherical coordinates
Algorithm
Classifier
Evaluation
Kinect
Νοηματική γλώσσα
Αλγόριθμος
Αξιολόγηση
Kinect (Programmable controller) (URL: http://id.loc.gov/authorities/subjects/sh2013000151)
Algorithms (URL: http://id.loc.gov/authorities/subjects/sh85003487)
Word recognition (URL: http://id.loc.gov/authorities/subjects/sh85148114)
Sign language (URL: http://id.loc.gov/authorities/subjects/sh85122390)
Classifiers (URL: http://id.loc.gov/authorities/subjects/sh99005054)
|
| url |
http://hdl.handle.net/11610/17559
|
| work_keys_str_mv |
AT nkinkelosnikolaos anagnōrisēlexeōntēsellēnikēsnoēmatikēsglōssasmetēchrēsētoukinect
|