Σύστημα αναγνώρισης λέξης-κλειδιού με χρήση τεχνικών βαθιάς μάθησης σε ενσωματωμένη συσκευή χαμηλής ισχύος

Abstract

Η παρούσα πτυχιακή εργασία ασχολείται με την την ανάπτυξη ενσωματωμένης εφαρμογής η οποία θα εκτελείτε σε αισθητήρα βασισμένο στη πλατφόρμα Arduino Nano 33 BLE Sense. Η εφαρμογή αυτή θα επιτρέπει την αυτόματη αναγνώριση φωνητικών εντολών περιορισμένου λεξιλογίου (voice command recognition). Για την εκπαίδευση του μοντέλου φωνητικής αναγνώρισης θα χρησιμοποιηθεί η βιβλιοθήκη ανάπτυξης νευρωνικών δικτύων βαθιάς μάθησης με δυνατότητα εκτέλεσης σε ενσωματωμένες συσκευές, TensorFlow Lite. Η υλοποίηση που θα προκύψει θα μπορεί να χρησιμοποιηθεί σε σενάρια καταγραφής ηχητικών δεδομένων σε δίκτυο αισθητήρων όπου η διαδικασία της αναγνώρισης θα γίνεται πάνω στον αισθητήρα (network edge sensing). Αναφορικά με τη συνδεσιμότητα του αισθητήρα, αυτή θα πραγματοποιείται μέσω bluetooth σε ενδιάμεσο ΗΥ ο οποίος στη συνέχεια θα στέλνει τα δεδομένα σε εξυπηρετητή νέφου