Αναγνώριση Χειρονομιών Της Αλφαβήτου Της Ελληνικής Νοηματικής Γλώσσας Με Έμφαση Στην Eξαγωγή Περιστροφικά Ανεξάρτητων Οπτικών Χαρακτηριστικών

Abstract

Η παρούσα διπλωματική επικεντρώνεται στις μεθόδους εξαγωγής οπτικών χαρακτηριστικών στα πλαίσια του προβλήματος της αναγνώρισης χειρονομιών της αλφαβήτου της Ελληνικής Νοηματικής Γλώσσας για στατικές χειρομορφές (fingerspelling). Συγκεκριμένα γίνεται εκτενής μελέτη διαφορετικών προσεγγίσεων για την εξαγωγή χαρακτηριστικών με ιδιαίτερη έμφαση στην μέθοδο HOG (Histogram of Oriented Gradients), η οποία ουσιαστικά αποτελεί μια πυκνή κατανομή τοπικών περιγραφών (ένα ιστογράμματα κατευθύνσεων για κάθε υποπεριοχή). Για την καλύτερη αξιοποίηση της υπάρχουσας οπτικής πληροφορίας προτείνονται διάφορες παραλλαγές των HOG ως προς την κατεύθυνση της βελτιστοποίησης της χωρικής κατανομής των τοπικών περιγραφών. Επιπλέον, παρουσιάζεται μια απλοποίηση των HOG και των προτεινόμενων παραλλαγών του για την εφαρμογή τους σε δυαδικές εικόνες, μειώνοντας σε μεγάλο βαθμό το υπολογιστικό κόστος και διατηρώντας την αποτελεσματικότητα των HOG περιγραφών.Μεγάλο μέρος της παρούσας μελέτης καταλαμβάνει η εξερεύνηση της δυνατότητας εξαγωγής περιγραφών ανεξάρτητων σε περιστροφές της εικόνας αλλά και της δυνατότητας εκτίμησης της εκάστοτε περιστροφής. Ως προς αυτή την κατεύθυνση αναπτύχθηκαν δυο διαφορετικές προσεγγίσεις με κοινό δομικό στοιχείο την μέθοδο HOG. Η πρώτη βασίζεται σε μια αρχική εκτίμηση της περιστροφής, η οποία βασίζεται στο περίγραμμα της χειρομορφής και αξιοποιεί την μέθοδο Shape Context. Η δεύτερη πρόκειται ουσιαστικά για μια γενίκευση των HOG και αποτελεί μια πιο συμπαγή μέθοδος με πολύ ενθαρρυντικά αποτελέσματα. Τέλος, γίνεται μελέτη της ικανότητας μοντελοποίησης και κατηγοριοποίησης των περιγραφών που προκύπτουν από τις προτεινόμενες μεθόδους με χρήση απλών τεχνικών αναγνώρισης προτύπων.