Αναγνώριση ομιλίας μέσω χαρτογράφησης εγκεφαλικών περιοχών

• Κύριος συγγραφέας: Τζιμοπούλου, Μαρία
• Άλλοι συγγραφείς: Σγάρμπας, Κυριάκος
• Μορφή: Thesis
• Γλώσσα: Greek
• Έκδοση: 2019
• Θέματα: Αναγνώριση ομιλίας; Ηλεκτροκορτικογραφία; 612.825 5; Voice activity; Electrocorticography

Σκοπός αυτής της διπλωματικής εργασίας είναι να ερευνηθεί η δυνατότητα ανίχνευσης της φωνητικής δραστηριότητας (voice activity detection) ενός ανθρώπου με εμφυτευμένα ηλεκτρόδια (ενδοκρανιακό ηλεκτροεγκεφαλογράφημα, Ηλεκτροκορτικογραφία ECoG). Στο πλαίσιο της εργασίας παρουσιάζεται αρχικά ο τρόπος μεταφοράς πληροφοριών εντός του εγκεφάλου και αναλύεται το ενδοκρανιακό ηλεκτροεγκεφαλογράφημα, μια τεχνική απεικόνισης αυτών των δραστηριοτήτων. ΄Επειτα περιγράφονται τα μαθηματικά εργαλεία που μας βοηθούν στην ανάλυση και επεξεργασία ενός στοχαστικού μοντέλου πολλών μεταβλητών. Για την έρευνα χρησιμοποιήθηκαν σήματα ηλεκτροκορτικογραφήματος που καταγράφονταν καθώς ένας άνθρωπος εκτελούσε μια άσκηση ονοματοδοσίας εικόνων. Από τα σήματα αυτά, εξήχθησαν χαρακτηριστικά με δύο τρόπους. Στον πρώτο, από τα ακατέργαστα ληφθέντα σήματα εξάχθηκε ο πίνακας των εκτιμώμενων MVAR model coefficients με την βοήθεια του eMVAR toolbox (Extended Multivariate Autoregressive Modelling Toolbox). Με την βοήθεια αυτού του πίνακα βρέθηκαν τα μέτρα εκτίμησης της συσχέτισης μεταξύ των χρονοσειρών. Στον δεύτερο τρόπο από τα ακατέργαστα ληφθέντα σήματα ECoG βρέθηκαν τα φασματικά χαρακτηριστικά , ενώ με την βοήθεια της μεθόδου Yule Walker βρέθηκαν τα AR model coefficients. Ο αλγόριθμος ReliefF χρησιμοποιήθηκε για την επιλογή του καλύτερου υποσυνόλου χαρακτηριστικών, και έγινε η ταξινόμηση με την βοήθεια του πακέτου WEKA(Waikato Enviroment for knowledge analysis) . Με αυτή την προσέγγιση ανιχνεύθηκε φωνητική δραστηριότητα από τα σήματα ECoG.