Die Präsentation wird geladen. Bitte warten

Die Präsentation wird geladen. Bitte warten

Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 1 / Ges Evaluation des sprachgesteuerten Assistenten.

Ähnliche Präsentationen


Präsentation zum Thema: "Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 1 / Ges Evaluation des sprachgesteuerten Assistenten."—  Präsentation transkript:

1 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 1 / Ges Evaluation des sprachgesteuerten Assistenten Jasper Eröffnungsvortrag zum Hauptseminar Bearbeiter: Johannes Trispel Betreuer: Dipl.-Inf. Steffen Müller Betreuender Hochschullehrer: Prof. Dr. H.M. Groß Datum:

2 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 2 / Ges Gliederung 1.Motivation 2.Vorstellung des Systems 1.Funktion 2.Software: Jasper 3.Hardware 3.Schwierigkeiten 4.Ausblick 5.Quellen/Links

3 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 3 / Ges  SERROGA  Schnittstelle Mensch-Maschine Motivation

4 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 4 / Ges  Spracherkennung  Sprachsynthese  Open Source  Lizenz: MIT  Python Funktionen und System Dictionary Language Model CMUCLMTK Pocketsphinx espeak Phonetisaurus

5 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 5 / Ges  Wetter, Posteingang, etc. in jeweils ein Modul  „Hotwords“ für jedes Modul  Standard Module 1.Aktivierung: „Jasper“ -> Beep 2.Spracheingabe 3.Verarbeitung 4.Sprachausgabe  Notification Module 1.NotificationClient 2.Verarbeitung 3.Sprachausgabe Funktion/API

6 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 6 / Ges Beispiel: Modul WORDS = ["MEANING", "OF", "LIFE"] def isValid(text): return bool(re.search(r'\bmeaning of life\b', text,re.IGNORECASE)) def handle(text, mic, profile): message = "It's 42“ mic.say(message)

7 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 7 / Ges Software: Jasper boot Vocabcompiler main, conversation „Jasper“? brain for each module Hotword && valid input mic.passiveListen mic.activeListen module.handle ja nein ja

8 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 8 / Ges Software: Jasper

9 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 9 / Ges  700 MHz CPU  512 MB RAM  Preis: 35€ Hardware: Raspberry Pi

10 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 10 / Ges Hardware: Setup

11 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 11 / Ges  Kompilieren der Tools -Dauer -openFST  Fertiges Linux-Image  Sprachqualität & Erkennung  bisher nur Englisch  Erkennungsdistanz Schwierigkeiten

12 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 12 / Ges  Verwendbarkeit im Projekt SERROGA -Verbesserungen an der Hardware (z.B. Mikrofon)  Fortschritt der Entwicklung  Evtl. Vergleich mit „Julius“ Ausblick

13 Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 13 / Ges   https://github.com/jasperproject/jasper-client https://github.com/jasperproject/jasper-client  Quellen/Links


Herunterladen ppt "Johannes Trispel: Evaluation des sprachgesteuerten Assistenten Jasper FG Neuroinformatik & Kognitive Robotik 1 / Ges Evaluation des sprachgesteuerten Assistenten."

Ähnliche Präsentationen


Google-Anzeigen