Spraak- en Gebarenherkenning

Speech and Gesture Recognition

6 EC

Semester 2, periode 4

5083SPGE6Y

Eigenaar Bachelor Kunstmatige Intelligentie
Coördinator dr. J.P. Trujillo
Onderdeel van Minor Logic and Computation, jaar 1Bachelor Kunstmatige Intelligentie, jaar 3Bachelor Bèta-gamma, major Kunstmatige Intelligentie, jaar 3
Links Zichtbare leerlijnen

Studiewijzer 2025/2026

Leerdoelen

  • The student is able to describe visual components of language
  • The student understands how linguistic information can be quantified
  • The student understands how computer vision can be used for visual aspects of language
  • The student recognizes challenges associated with sign and gesture recognition
  • The student is able to use and assess existing algorithms for gesture and sign recognition
  • The student can describe how emotion can be classified from speech

Onderwijsvormen

  • Hoorcollege
  • Laptopcollege
  • Zelfstandig werken aan bijv. project/scriptie

Lectures (hoorcolleges) will contribute to understanding of visual and linguistic components of language and how they relate to speech- and gesture-recognition. These sessions will also be used for discussions of the literature to reinforce learning and critical thinking about the study materials.

Practical days (laptopcolleges) will be used for hands-on assignments, including tutorials (first half of the course) and for work on the final project (last half of the course). This will contribute to students' ability to use and assess models of speech- and gesture recognition. 

The project will further reinforce hands-on experience, providing students with practical skills in using these methods, but also in recognizing and assessing challenges and shortcomings.

Verdeling leeractiviteiten

Activiteit

Uren

Deeltoets

2

Hoorcollege

12

Laptopcollege

12

Presentatie

2

Zelfstudie

140

Totaal

168

(6 EC x 28 uur)

Aanwezigheid

Aanwezigheidseisen opleiding (OER-B Artikel B-4.10):

  • Voor sommige studieonderdelen geldt een aanwezigheidsplicht. Indien er een aanwezigheidsplicht geldt, dan staat dit aangegeven in de studiegids. De onderbouwing voor, en invulling van, deze aanwezigheidsplicht kan per vak verschillen, en is opgenomen in de studiewijzer. Wanneer studenten niet voldoen aan deze aanwezigheidsplicht kan het onderdeel niet met een voldoende worden afgerond.

Aanvullende eisen voor dit vak:

Students may be absent for 2 out of 6 seminars. 

Toetsing

Onderdeel en weging Details

Eindcijfer

0.4 (100%)

Deeltoets

Inzage toetsing

The moment for inzage (inspection of one's work and grade) will be communicated via Canvas, and students will be able to sign up for specific timeslots.

Opdrachten

Besides the exam, students will need to (and be assessed on):

- read and engage with relevant articles and media (15%) - Engagement will be graded based on completion of the reading and engagement with reflections and discussion. This is conducted via Perusall.

- complete a mid-term exam (15%) - Feedback will be made available shortly after completion

- complete a research project (30%) - This will be conducted in small groups, and students will have several weeks to work. Assessment is based on a presentation of the project. 

Non-assessed assignments include:

- completion of Python-based tutorials, in class (laptopcollege)

- engagement in discussions about the literature (hoorcollege)

Fraude en plagiaat

Dit vak hanteert de algemene 'Fraude- en plagiaatregeling' van de UvA. Hier wordt nauwkeurig op gecontroleerd. Bij verdenking van fraude of plagiaat wordt de examencommissie van de opleiding ingeschakeld. Zie de Fraude- en plagiaatregeling van de UvA: http://student.uva.nl

Weekplanning

Weeknummer Onderwerpen Studiestof
1 Kwantificeren van informatie in taal Artikelen, tutorials
2 Emotieherkenning in gesproken taal Artikelen, tutorials
3 Gebarenherkenning (Gesture recognition) Artikelen, tutorials
4    
5    
6    
7    
8    

Contactinformatie

Coördinator

  • dr. J.P. Trujillo