Sommersemester 22

Machine learning can be used to train robots on different problems. Training environments that simulate future deployment scenarios are often used for this purpose. However, these environment simulations only represent one state of possible reality, leading to erroneous behavior of the trained robot if the real environment differs from the simulated environment. To prevent erroneous behavior, the project group will investigate the possibility of diversifying the simulated environments by expert input in virtual reality.

Its goal is to be able to input different possible states of reality in VR through appropriate interactions and display them to the users. This includes segmentation and naming of relevant objects, relationships among objects, and their movement possibilities. For segmentation and naming, a 3D scan of the environment acquired by sensors is divided into individual relevant objects, which are assigned to corresponding labels. Subsequently, the relationships of the objects among each other shall be entered (e.g. the PC monitor is assigned to the table). As a last step, it should be possible to enter the movement possibilities of the individual objects (e.g. drawer can be pulled out). The environment representations obtained in this way can then be used for robot training.

In der Vorlesung Intelligent User Interfaces werden aktuelle Forschungsthemen vermittelt, die sich an der Schnittstelle zwischen Mensch-Computer Interaktion und maschinellem Lernen befinden. Dabei werden unterschiedliche Arten von User Interfaces behandelt (z.B. natürliche Sprachverarbeitung, Gestensteuerung, Recommender Systems, Explainable AI). Das Ziel ist es Studierenden die Kompetenz zu vermitteln existierende User Interfaces zu bewerten, selbst zu implementieren und zukünftige Entwicklungen in diesem Bereich abzuschätzen.

Die Vorlesung findet als Blockveranstaltung statt. Insgesamt sollen Studierende an drei angebotenen Blöcken teilnehmen, in denen Inhalte im Vorlesungsstil vorgestellt und diskutiert werden. Nach jedem Block erfolgt ein praktischer Teil, in dem sich Studierende in Gruppen von drei Personen mit einer thematisch-vorgegebenen intelligenten Nutzungsschnittstelle beschäftigen und eine Implementierung dieser erarbeiten. Die Veranstaltung endet mit einer Präsentation aller umgesetzen Projekte und einer mündlichen Prüfung.

Der erste Termin ist Mittwoch der 06. April 2022 um 10 Uhr. Die Veranstaltung findet in Raum SM 205 statt. Klicken Sie hier um zum Moodlekurs zu gelangen (Schlüssel: iui-ss2022).

Die Studierenden

• besitzen fundierte Kenntnisse über existierende intelligente Nutzungs-schnittstellen und könne diese hinsichtlich technischer Anforderungen und möglicher Einsatzszenarien bewerten
• verfügen über die Kompetenz intelligente Nutzungsschnittstellen in unterschiedlichen Kontexten zu implementieren
• haben eine umfassendes Verständnis für Implikationen die sich aus der Anwendung intelligenter Nutzerschnittstellen ergeben
• können zukünftige Entwicklungen im Bereich der intelligenten Nutzungsschnittstellen abschätzen

Inhaltlich werden die folgenden Themen der Reihenfolge nach behandelt:

• The Human Body as Input
  • Gestures
  • (Hand) Tracking
  • Natural Language Processing
• Supporting the User
  • Recommender Systems
  • Usable Security
  • Context Aware Interaction
• Autonomous Systems and Ethics
  • Voice-based Interfaces
  • Explainable AI
  • Bias and Ethics in Intelligent User Interfaces

Literaturangaben und Links werden individuell bei der Vorstellung der einzelnen Themen bekannt gemacht.

Portfolioprüfung

Bei der Vorlesung handelt es sich um ein Vertiefungsmodul für den Bachelor-Studiengang "Angewandte Informatik." Die Veranstaltung kann leider nicht von Studierenden aus dem Masterstudium belegt werden.

Application Deadline: 15. April 2022

To apply please send an e-mail to Marion Koelle.

Title: Seminar 2022

Topics will be assigned at the beginning of the course. State your name, matriculation number, course of study, and credit points needed.

Note: Sessions throughout the semester are mandatory to attend.