Οπτική Ανάλυση Βίντεο Νοηματικής Γλώσσας: Κατάτμηση, Παρακολούθηση Και Εξαγωγή Χαρακτηριστικών

Abstract

Η παρούσα διπλωματική εργασία επικεντρώνεται στην υλοποίηση, επέκταση και ανάπτυξη μεθόδων για την κατασκευή ενός συστήματος ανάλυσης βίντεο της νοηματικής γλώσσας, προς χρήση σε εφαρμογή αναγνώρισης. Η εφαρμογή αυτή εμπίπτει στο ερευνητικό πεδίο της Όρασης Υπολογιστών και ειδικότερα στον κλάδο της αλληλεπίδρασης ανθρώπου - μηχανής. Πιο συγκεκριμένα, στην εργασία εξετάζονται όλα τα στάδια που προηγούνται της διαδικασίας της αναγνώρισης, και συγκεκριμένα τα στάδια της κατάτμησης των εικόνων, της παρακολούθησης της κίνησης των χεριών του νοηματιστή, και της εξαγωγής χαρακτηριστικών. Ιδιαίτερη έμφαση δίνεται στην αντιμετώπιση πρακτικών προβλημάτων που συχνά απαντώνται σε εφαρμογές αναγνώρισης νοηματικής γλώσσας, όπως είναι το πρόβλημα των επικαλύψεων (occlusions). Δοκιμάζεται ένα ευρύ σύνολο μεθόδων, που προέκυψε μετά από εκτενή αναζήτηση στη βιβλιογραφία.Η εργασία είναι δομημένη σε πέντε κεφάλαια, κάθε ένα από τα οποία ασχολείται με ένα ξεχωριστό υποπρόβλημα. Το συνολικό σύστημα πρόκειται να χρησιμοποιηθεί για την κατασκευή πραγματικού και λειτουργικού συστήματος αναγνώρισης της ελληνικής νοηματικής γλώσσας, σε συνδυασμό βέβαια με ένα στάδιο αναγνώρισης.