Project Gameface: Ένα mouse για παιχνίδια χωρίς χέρια

Το Project Gameface είναι ένα νέο gaming mouse ανοικτού κώδικα που επιτρέπει στους ανθρώπους να ελέγχουν τον κέρσορα του υπολογιστή χρησιμοποιώντας την κίνηση του κεφαλιού τους και τις χειρονομίες του προσώπου τους. Οι άνθρωποι μπορούν να σηκώσουν τα φρύδια τους για να κάνουν κλικ και να σύρουν, ή να ανοίξουν το στόμα τους για να μετακινήσουν τον κέρσορα, καθιστώντας δυνατό για οποιονδήποτε να ασχοληθεί με το gaming.

Το project άντλησε έμπνευση από την ιστορία του τετραπληγικού streamer βιντεοπαιχνιδιών Lance Carr, ο οποίος ζει με μυϊκή δυστροφία, μια προοδευτική ασθένεια που εξασθενεί τους μυς. Ο Lance αρνήθηκε να αφήσει τους σωματικούς του περιορισμούς να τον αποτρέψουν από την αγάπη του για το gaming, οπότε χρησιμοποίησε ένα ποντίκι που παρακολουθεί το κεφάλι του για να ελέγχει τον κέρσορα. Το 2021, το σπίτι του Lance έπιασε φωτιά ενώ έπαιζε ένα βράδυ - και όλα αυτά καταγράφηκαν σε ζωντανή ροή και τα παρακολούθησαν παίκτες σε όλο τον κόσμο. Ο Lance έχασε όλο τον εξοπλισμό του για online gaming στη φωτιά, συμπεριλαμβανομένου του ακριβού ποντικιού εντοπισμού κεφαλής, το οποίο είναι η κύρια τεχνολογία που του επέτρεπε να παίζει ηλεκτρονικά παιχνίδια.

Αφού ακούσαμε την ιστορία του Lance, ξέραμε ότι έπρεπε να βοηθήσουμε. Έτσι συνεργαστήκαμε με τον Lance για να συνδιαμορφώσουμε το Project Gameface, ένα mouse για παιχνίδια χωρίς χέρια που χρησιμοποιεί λύσεις ανοικτού κώδικα Google MediaPipe. Οι κινήσεις του κεφαλιού και οι χειρονομίες του προσώπου που καταγράφονται απλά από μια κάμερα και αναγνωρίζονται από μοντέλα μηχανικής μάθησης για να μετακινήσουν τον κέρσορα ανάλογα. Για να προσαρμοστούμε στις ανάγκες των διαφορετικών χρηστών, ενσωματώσαμε την ιδέα του μεγέθους της χειρονομίας, η οποία επιτρέπει στους χρήστες να ελέγχουν πόσο εμφανής πρέπει να είναι η χειρονομία τους για να ενεργοποιήσει μια ενέργεια του ποντικιού.

Το Project Gameface είναι μια πολλά υποσχόμενη νέα τεχνολογία που έχει τη δυνατότητα να κάνει τα παιχνίδια πιο προσιτά. Ο κώδικας είναι ανοιχτού τύπου και διατίθεται σε προεπισκόπηση σήμερα. Το εργαλείο βρίσκεται ακόμη σε στάδιο ανάπτυξης, αλλά είμαστε ενθουσιασμένοι με τις δυνατότητες που έχει να αλλάξει τις ζωές των ανθρώπων, επειδή είναι σχετικά φθηνό στην κατασκευή και τη συντήρησή του. Αν ενδιαφέρεστε να συνεισφέρετε, να βελτιώσετε ή να χρησιμοποιήσετε αυτή την τεχνολογία, επισκεφθείτε το GitHub repository.