Παράλυτη γυναίκα μιλάει ξανά μέσω ψηφιακού avatar (βίντεο)

Ερευνητές των πανεπιστημίων του San Francisco και του Berkeley, σε συνεργασία με την εταιρία Speech Graphics, αλλάζουν τα δεδομένα για την επικοινωνία των παράλυτων ασθενών. Χρησιμοποιώντας μία συσκευή Brain-Computer Interface (BCI), μετέτρεψαν τα αναλογικά σήματα που παράγει ο εγκέφαλος σε ψηφιακά σήματα τα οποία καταλαβαίνει ο υπολογιστής. Έτσι, έδωσαν τη δυνατότητα σε μία γυναίκα η οποία είχε παραλύσει από εγκεφαλικό, να μπορέσει να μιλήσει ξανά μέσω ενός ψηφιακού avatar το οποίο ήλεγχε με το BCI.

Οι ερευνητές τοποθέτησαν μία συστοιχία ηλεκτροδίων στο κέντρο ελέγχου του λόγου στον εγκέφαλο της ασθενούς. Αυτά κατέγραφαν τα ηλεκτρικά σήματα τα οποία κανονικά θα κινούσαν τους μύες στο σαγόνι, τα χείλη και τη γλώσσα και τα μετέδωσαν μέσω καλωδίου σε έναν υπολογιστή. Έπειτα, με τη χρήση AI και εκπαίδευση μερικών εβδομάδων, η AI μετέφραζε τα ηλεκτρικά σήματα για περισσότερες από 1.000 λέξεις.

Το εντυπωσιακό είναι πως κατάφεραν να συνθέσουν μία φωνή η οποία βασίστηκε σε φυσικά δείγματα της φωνής της ασθενούς τα οποία είχαν καταγραφεί πριν το εγκεφαλικό. Έπειτα, με τη βοήθεια της Speech Graphics, της εταιρίας η οποία ανέπτυξε τα φωτορεαλιστικά animation προσώπου των γνωστών παιχνιδιών The Last of Us II και Halo Infinite, έδωσαν “ζωή” στο avatar της ασθενούς, το οποίο πλέον μπορούσε να μιλήσει με τη φωνή της και να κινήσει τους “ψηφιακούς μύες” που έπρεπε, για να παράγει ένα ρεαλιστικό αποτέλεσμα. Έτσι, η ασθενής μπόρεσε να εκφράσει και συναισθήματα με το avatar, επικοινωνώντας ακόμα και χωρίς λέξεις.

 πηγή: Nature

Διαβάστε επίσης Έρχονται τα ιπτάμενα σκούτερ