Επικοινωνώ

Το έργο Επικοινωνώ στοχεύει στην υλοποίηση ενός συστήματος, με τη μορφή μιας εφαρμογής για έξυπνα κινητά ή ταμπλέτες , που θα έχει ως στόχο την εύκολη, αποτελεσματική και αμφίδρομη επικοινωνία κωφών και ακουόντων συνομιλητών σε πραγματικό χρόνο. Ο πρωταρχικός στόχος του έργου αποτελείται από την αναγνώριση της ομιλίας του κωφού συνομιλητή, η οποία θα γίνεται στην Ελληνική Νοηματική Γλώσσα. Στα πλαίσια του έργου θα σχεδιαστούν καινοτόμες μέθοδοι βαθιάς μάθησης (deep learning) που θα στηρίζονται στην ανάπτυξη μεγάλης κλίμακας συνελικτικών και αναδρομικών νευρωνικών δικτύων (Convolutional και Recurrent Neural Networks) για την αναγνώριση των ανθρώπινων κινήσεων. Για την αναγνώριση των διαφόρων νοημάτων θα χρησιμοποιηθεί πολυτροπική πληροφορία (χρώμα, βάθος, κίνηση, ανθρώπινος σκελετός) σε πολλαπλές κλίμακες (κινήσεις ολόκληρου σώματος, χειρονομίες). Σημαντική πρόκληση αποτελεί η ενσωμάτωση των σχεδιασμένων νευρωνικών δικτύων στην πλατφόρμα της έξυπνης συσκευής, δηλαδή σε ένα περιβάλλον με περιορισμένες δυνατότητες επεξεργαστικής ισχύος.

Κοινοπραξία

MLS ΠΛΗΡΟΦΟΡΙΚΗ Α.Ε.
Εργαστήριο Νεοελληνικών Διαλέκτων, Τμήμα Φιλολογίας, Πανεπιστήμιο Πατρών (ΕΝΔΙ)
Εθνικό Κέντρο Έρευνας και Τεχνολογικής Ανάπτυξης (ΕΚΕΤΑ/ΙΠΤΗΛ)
Κέντρο ελληνικής νοηματικής γλώσσας ΚΕΝΓ