Περίπου 500.000 Αμερικανοί χρησιμοποιούν την Αμερικανική Νοηματική Γλώσσα (ASL). Για τους κωφούς χρήστες του ASL, η επικοινωνία με όσους δεν μιλούν άπταιστα τη γλώσσα μπορεί να αποτελέσει πρόκληση. Αν και οι περισσότεροι Αμερικανοί που έχουν κωφά λόγια μάθουν την ομιλούμενη γλώσσα μέσω της λογοθεραπείας, κάποιοι εξακολουθούν να έχουν δύσκολο χρόνο να γίνουν κατανοητοί προφορικά ή απλά να βρουν τη νοηματική γλώσσα μια πιο υγρή μορφή έκφρασης.
Τώρα, οι ερευνητές του Texas A & M University έχουν αναπτύξει μια φορητή συσκευή που μεταφράζει τη νοηματική γλώσσα στα αγγλικά, ανιχνεύοντας τις κινήσεις του χρήστη. Η συσκευή, ακόμα στο πρωτότυπο στάδιο, μπορεί να αναγνωρίσει περίπου 40 σήματα ASL με 96% ακρίβεια.
Το σύστημα χρησιμοποιεί δύο αισθητήρες. Ο ένας είναι ένας αισθητήρας κίνησης με επιταχυνσιόμετρο και γυροσκόπιο, ο οποίος μετρά την ταχύτητα και τη γωνία του χεριού και του βραχίονα του χρήστη. Με την ανίχνευση όπου τα χέρια και τα χέρια του χρήστη είναι, μπορεί να αρχίσει να μαντέψει τι λέξη μπορεί να υπογράφουν. Έπειτα υπάρχει ένας ηλεκτρομυογραφικός αισθητήρας, ο οποίος μετρά το ηλεκτρικό δυναμικό της κίνησης των μυών. Μπορεί να πει ακριβώς ποιο μέρος των χεριών και των δακτύλων κινείται, το οποίο είναι κρίσιμο.
"Αν κοιτάξετε το αμερικανικό λεξιλόγιο της νοηματικής γλώσσας, υπάρχουν περιπτώσεις όπου το ίδιο το χέρι κινείται και τότε έχετε πολύ λεπτή κίνηση των δακτύλων", λέει ο Roozbeh Jafari, ο μηχανικός που οδήγησε το έργο. "Αν θέλετε να εντοπίσετε αυτά, δεν θα μπορείτε να χρησιμοποιήσετε μόνο την κίνηση του χεριού".
Για παράδειγμα, η λέξη "παρακαλώ" στην ASL περιλαμβάνει την πραγματοποίηση κύκλων πάνω από το στήθος σας με το ανοιχτό χέρι σας. Η λέξη "συγγνώμη" χρησιμοποιεί μια πανομοιότυπη κίνηση, αλλά το χέρι είναι κλειστό σε μια γροθιά.
Οι αισθητήρες φοριούνται στον δεξιό καρπό του χρήστη. Οι πληροφορίες που συλλέγονται αποστέλλονται μέσω Bluetooth σε φορητό υπολογιστή. Αυτός ο φορητός υπολογιστής εκτελεί έναν αλγόριθμο για την ερμηνεία του σημείου και εμφανίζει τη λέξη στα αγγλικά στην οθόνη.
Τελικά, ο Jafari ελπίζει να αρνηθεί την ανάγκη για το φορητό υπολογιστή ενσωματώνοντας έναν μικρό υπολογιστή απευθείας στη συσκευή. Ο υπολογιστής θα μπορούσε τότε να στείλει τις αγγλικές λέξεις στο τηλέφωνο άλλου προσώπου, έτσι ώστε να μπορεί να διαβάσει τι λέει ο συνομιλητής συνομιλίας τους.
Προφανώς, ο μεταφραστής θα πρέπει επίσης να καταλάβει πολύ περισσότερα σημεία από τα 40 για να είναι ένα βιώσιμο προϊόν. Ενώ υπάρχουν εκατοντάδες σημάδια ASL, τα αρχικά 40 σημεία επελέγησαν επειδή είναι κοινά και χρήσιμα, λέει ο Jafari. Ένα άτομο μπορεί να τα χρησιμοποιήσει για να πει απλές κρίσιμες προτάσεις όπως "Χρειάζομαι νερό". Η συσκευή θα χρειαστεί επίσης να γίνει πιο γρήγορα - αυτή τη στιγμή, οι χρήστες πρέπει να κάνουν παύση μεταξύ των λέξεων για να τους δώσουν χρόνο να μεταφράσουν.
"Στην πραγματικότητα οι άνθρωποι δεν μιλούν έτσι", λέει ο Jafari.
Όμως, αυτό το πιο προηγμένο σύστημα, λέει, είναι ένας τρόπος που βρίσκεται κάτω από τη γραμμή και θα περιλαμβάνει περισσότερη εργασία και χρηματοδότηση.
Οι προηγούμενες τεχνολογίες μετάφρασης ASL χρησιμοποίησαν κάμερες για να διαβάσουν τις χειρονομίες. Αλλά αυτά δεν λειτουργούν καλά σε συνθήκες χαμηλού φωτισμού, λέει ο Jafari. Επιπλέον, πολλοί άνθρωποι δεν τους αρέσει η ιδέα να έχουν κάμερα να τους παρακολουθούν συνεχώς.
Ορισμένες άλλες τεχνολογίες έχουν δημιουργηθεί τα τελευταία χρόνια για να βοηθήσουν τους κωφούς και τους ακοής να επικοινωνούν μεταξύ τους. Μια εφαρμογή που ονομάζεται Transcense, που κυκλοφόρησε πέρυσι, μεταφράζει ομιλία από πολλούς ανθρώπους σε γραπτές λέξεις και τις παρουσιάζει στην οθόνη με χρωματικές φούσκες. Έχει σκοπό να βοηθήσει τους κωφούς σε συναντήσεις ή σε κοινωνικές καταστάσεις, όπου πολλοί ομιλητές μπορούν να αποτελέσουν πρόκληση και για τους πιο καταρτισμένους αναγνώστες. Μια άλλη εταιρεία, η MotionSavvy, εργάζεται σε ένα tablet που ερμηνεύει τις κινήσεις του ASL και διαβάζει τα λόγια δυνατά στα αγγλικά. Στην Κίνα, οι ερευνητές χρησιμοποίησαν τον εξοπλισμό ανίχνευσης κίνησης της Kinect της Microsoft για να μεταφράσουν την Κινέζικη Νοηματική Γλώσσα σε προφορικές και γραπτές λέξεις.
Ως άνθρωπος που έχει εργαστεί εδώ και καιρό με φορετές τεχνολογίες, όπως τα ρολόγια που παρακολουθούν τον καρδιακό ρυθμό, ο Jafari κατανοεί τη σημασία της άνεσης και της αισθητικής. Αν μια συσκευή είναι άβολη και ενοχλητική, οι άνθρωποι δεν θα την φορούν. Το σημερινό πρωτότυπο της συσκευής μετάφρασης της νοηματικής γλώσσας μοιάζει με ένα ιατρικό εργαλείο, με ηλεκτρόδια και ιμάντες και καλώδια. Ο Jafari θα ήθελε η τελική έκδοση να είναι μικρή και ελκυστική.
"Θέλω να κάνω όλο το σύστημα να ταιριάζει σε ένα ρολόι", λέει.
