392260 Projekt: Entwicklung eines interaktiven Systems zur Imitation von emotional gefärbter Sprache (Pj) (WiSe 2013/2014)
Contents, comment
-
Sprache und Mimik sind wichtige, wenn nicht die wichtigsten Kanäle für die menschliche Kommunikation.
Informationen werden einerseits explizit durch ausdrückliche Formulierung übermittelt.
Jede Äußerung ist außerdem durch die Sprechmelodie und/oder durch Gesichtsmimik emotional gefärbt (implizite Übermittlung).Das Ziel dieses Projektes ist die Implementierung eines interaktiven Systems, welches den sprachlichen und emotionalen Inhalt von Äußerungen eines menschlichen Interaktionspartners erfasst und erkennt.
Anschließend soll so die Sprache und Mimik des Benutzers durch einen virtuellen Agenten des Roboters Flobi[1] wiedergegeben werden.Als Basis für die Spracherkennungskomponente wird der ISR (Incremental Speech Recognizer) aus dem Toolkit ESMERALDA[2] mit Modellen aus dem deutschen Verbmobil-Korpus[3] verwendet.
Hinsichtlich der Emotionserkennung bietet sich die Verwendung von Open-Source-Toolkits wie EmoVoice[4] oder OpenSMILE[5] oder einer eigenen Komponente an.
Als Sprachsynthesesystem wird OpenMary[6] verwendet.Mögliche Erweiterungen sind Erhöhung der Robustheit der Emotionserkennung und -klassifizierung sowie Evaluation und Tuning der wahrgenommenen emotionalen Färbung der synthetisierten Sprache.
Requirements for participation, required level
-
Es sei dringend empfohlen, dass die Veranstaltung "Einführung in die Automatische Spracherkennung" absolviert wurde.
Außerdem sollten gute Programmierkenntnisse in Java oder C++ vorhanden sein.
Bibliography
-
[1] https://toolkit.cit-ec.uni-bielefeld.de/systems/flobi-simulation
[2] http://sourceforge.net/projects/esmeralda
[3] http://verbmobil.dfki.de/
[4] http://www.informatik.uni-augsburg.de/de/lehrstuehle/hcm/projects/tools/emovoice
[5] http://sourceforge.net/projects/opensmile
[6] https://github.com/marytts/marytts
Teaching staff
Dates ( Calendar view )
| Frequency | Weekday | Time | Format / Place | Period |
|---|
Subject assignments
| Module | Course | Requirements | |
|---|---|---|---|
| 39-M-Inf-P1_NWI Projekt 1 | Projekt 1 | Ungraded examination
|
Student information |
| 39-M-Inf-P2_NWI Projekt 2 | Projekt 2 | Ungraded examination
|
Student information |
| 39-M-Inf-P_ver1 Projekt | Projekt | Ungraded examination
|
Student information |
The binding module descriptions contain further information, including specifications on the "types of assignments" students need to complete. In cases where a module description mentions more than one kind of assignment, the respective member of the teaching staff will decide which task(s) they assign the students.
- Registered number: 0
- This is the number of students having stored the course in their timetable. In brackets, you see the number of users registered via guest accounts.
- Address:
- WS2013_392260@ekvv.uni-bielefeld.de
- This address can be used by teaching staff, their secretary's offices as well as the individuals in charge of course data maintenance to send emails to the course participants. IMPORTANT: All sent emails must be activated. Wait for the activation email and follow the instructions given there.
- If the reference number is used for several courses in the course of the semester, use the following alternative address to reach the participants of exactly this: VST_43479041@ekvv.uni-bielefeld.de
- Coverage:
- No students to be reached via email
- Notes:
- Additional notes on the electronic mailing lists
- Last update basic details/teaching staff:
- Friday, December 11, 2015
- Last update times:
- Thursday, October 17, 2013
- Last update rooms:
- Thursday, October 17, 2013
- Type(s) / SWS (hours per week per semester)
- project (Pj) / 8
- Department
- Faculty of Technology
- Questions or corrections?
- Questions or correction requests for this course?
- Planning support
- Clashing dates for this course
- Links to this course
- If you want to set links to this course page, please use one of the following links. Do not use the link shown in your browser!
- The following link includes the course ID and is always unique:
- https://ekvv.uni-bielefeld.de/kvv_publ/publ/vd?id=43479041
- Send page to mobile
-
Click to open QR code
Scan QR code:
- ID
- 43479041