Dachthema »Teachable Machines«

Maschinelles Lernen und Musterkennung wird zukünftig auch bei der Mensch-Maschine-Interaktion eine immer größere Rolle spielen.

In der Lehrveranstaltung nutzen wir lernfähige Systeme als experimentelle Gestaltungswerkzeuge. Dabei setzen wir Tools aus der Creative Coding Community ein und werden auch die Prinzipien hinter den Werkzeugen kennen lernen.

Wir »trainieren« individuelle Eingabemodalitäten (Posen, Gesten, Emotionserkennung, Sprache, Bilder…) und untersuchen mögliche Anwendungsfelder im Interaktionsdesign. Für die Ausgabe soll der Screen auch durch physische Ausgabeschnittstellen via Arduino-Board erweitert werden. Am Ende des Semesters werden die Ergebnisse in einer Ausstellung präsentiert.

Inhalte

- Maschinelles Lernen & Creative Coding

- multimodale Ein- und Ausgabeschnittstellen

- Mensch-Maschine-Interaktion

- Prototyping

Werkzeuge

- P5.js, ml5.js, Arduino, face-api.js …

- aber aber analoges Arbeiten (Paperprototyping, Materialstudien, Physical Computing…)

Links

https://ml5js.org/community

https://ml5-fellowship-2020.github.io/examples/

https://teachablemachine.withgoogle.com/

https://experiments.withgoogle.com/collection/ai

https://justadudewhohacks.github.io/face-api.js/webcam_face_expression_recognition