Generative Multimedia

Worum geht's

Du lernst Grundlagen und moderne Methoden der generativen Modellierung mit Schwerpunkt auf Multimedia (Bilder, Text, Musik). Am Ende verstehst du die Prinzipien, Architekturen und Einsatzgebiete von VAEs, GANs, Diffusionsmodellen, Transformern und Energy-based Models und kannst einfache Modelle implementieren und trainieren sowie aktuelle Forschung kritisch bewerten.

Was du danach kannst

• Prinzipien und Architekturen moderner generativer Modelle verstehen
• Stärken, Einschränkungen und Anwendungen von VAEs, GANs, Transformern, Diffusions- und Energy-based Models kennen
• Generative Modelle für Bilder, Text und Musik implementieren und Trainingsstrategien entwerfen
• State-of-the-art Forschung zu multimodalen Modellen und großen Sprachmodellen kritisch beurteilen

Aus was das Modul besteht

• VorlesungEinführung in Theorie, Konzepte und Anwendungen; interaktiv mit Diskussionen und Q&A
• Labor / PraktikumHands-on Implementationen und programmierbezogene Übungen, synchron zu Vorlesungsthemen

Lehrmethode

• Präsentationen und VorlesungsfolienVermittlung theoretischer Konzepte und Kontext
• Interaktive Vorlesungssitzungen (Q&A, Diskussionen)Vertiefung und Klärung von Inhalten
• Interaktive Coding-SessionsAnwendung des Gelernten in praktischen Implementierungen
• Diskussionen von ForschungspapierenKritische Auseinandersetzung mit aktueller Forschung
• Gastvorträge von Branchenexpert:innen (falls verfügbar)Praxisbezug und Einblicke aus der Industrie
• Tutorien mit ProgrammieraufgabenSelbstständiges Üben und Implementieren
• Essays zu ForschungsarbeitenZusammenfassen und kritisches Bewerten von Literatur