Kaspar 2028
Eine Neugestaltung von Peter Handkes Bühnentext «Kaspar» (1968) mit digitaldramaturgischen Methoden.
A reimagining of Peter Handke's stage play “Kaspar” (1968) using digital dramaturgical methods.
Leitung:Lead:
Dr. Manuel Flurin Hendry (ETH Zürich – ZHdK)
Prof. Dr. Lena Gieseke (Filmuniversität Babelsberg)
Ilja Mirsky (Residenztheater München)
Entwicklung:Development:
Malte Hillebrand
Philip Gerdes
Moritz Huson
Kreation:Creation:
Dominic Huber
Mikko Gaestel
Koordination:Coordination:
Andreea-Cristina Mircea
Gefördert von der Kulturstiftung des Bundes im Rahmen der Förderlinie «Kunst & KI»
Funded by the Kulturstiftung des Bundes as part of the «Kunst & KI» funding programme
Projektbeschreibung
Project Description
«Kaspar» ist ein Stück der Sprachkritik, von Handke selbst als «Sprachfolter» bezeichnet. Konfrontiert mit eloquenten Doppelgängern und überspült von Befehlen kämpft die von Kaspar Hauser inspirierte Titelfigur um ihre Individualität – und scheitert. 1968 revoltierte Handke mit seinem Text gegen eine autoritäre Gesellschaft, die uns in tradierte Formen presst.
“Kaspar” is a play that critiques language, described by Handke himself as “linguistic torture.” Confronted by eloquent doppelgängers and inundated with orders, the title character — inspired by Kaspar Hauser — strives to maintain their individuality, and fails. In 1968, Handke used his text to rebel against an authoritarian society that forces us into traditional molds.
Heute stammen diese Formen aus dem Cyberspace. Nicht der Untertan, sondern fröhliche Konsumierende sind das Ideal – angefüttert mit Optimierungsversprechungen und normativen Texten und Bildern, oft aus der Feder einer KI. Mit Chören von Werbeprospekt-Prosa, die das Publikum bis in den Pausenraum verfolgen, und einem über der Bühne thronenden, allsehenden Auge erinnert Handkes Text verblüffend an ChatGPT und die magisch-irritierende Natur maschinen-generierter Sprache und Sprechens.
Today, these forms originate in cyberspace. The ideal is not the subject but the cheerful consumer — fed promises of optimization and normative texts and images, often penned by an AI. With choruses of advertising-brochure prose that follow the audience all the way to the break room, and an all-seeing eye enthroned above the stage, Handke's text is strikingly reminiscent of ChatGPT and the magical, unsettling nature of machine-generated language and speech.
Kaspar.ai (K.ai)
Um diese Irritationen künstlerisch zu erkunden, entwickeln wir das KI-System Kaspar.ai (K.ai). Kaspars Darsteller:in wird mit K.ai in Aussehen und Stimme digital geklont und steht sich damit selbst – im Proberaum wie auf der Bühne – als digitale:r Spielpartner:in (und Gegner:in) zur Verfügung. Für K.ai entwickeln wir Fähigkeiten zum Spiel nach Vorgaben der Regie und zur interaktiven, von der Maschine generierten Improvisation. Das doppelgängerische Erscheinungsbild beginnt beim Realismus und wird kontinuierlich zu albtraumartigen Gebilden verfremdet.
To explore these unsettling tensions artistically, we are developing the AI system Kaspar.ai (K.ai). Kaspar's performer is digitally cloned with K.ai in appearance and voice, and is thus available to themselves — in the rehearsal room as on stage — as a digital acting partner (and opponent). For K.ai, we are developing capabilities for performing according to the director's instructions and for interactive, machine-generated improvisation. The doppelgänger-like appearance begins with realism and is continuously distorted into nightmarish forms.
Leitende Fragen
Guiding Questions
- Welche neuen Spielformen entstehen, wenn Spielende mit ihrem virtuellen Selbst oder anderen KI-generierten Spielenden in Dialog treten?
- What new forms of play emerge when performers enter into dialogue with their virtual selves or with other AI-generated performers?
- Welche ethischen und psychologischen Konflikte treten dabei auf?
- What ethical and psychological conflicts arise in the process?
- Mit welchen Techniken und Ästhetiken können wir GenAI-basierte und cineastische Praktiken (Virtual Production2) künstlerisch gewinnbringend in theatrale Produktionsabläufe integrieren?
- With which techniques and aesthetics can we artistically and productively integrate GenAI-based and cinematic practices (virtual production2) into theatrical production workflows?
- Wie können wir Künstler:innen mit GenAI ermächtigen, anstatt sie auszubeuten?
- How can we use GenAI to empower artists rather than exploit them?
- Was geschieht mit Kaspars Digitalisat nach Produktionsende? Wem gehören die Daten?
- What happens to Kaspar's digital double after the production ends? Who owns the data?
Zielsetzung
Objectives
- Anregung eines öffentlichen, kritischen Diskurses über GenAI, die Auflösung der Grenze zwischen analoger und digitaler Welt
- Fostering a public, critical discourse on GenAI and the dissolution of the boundary between the analog and digital worlds
- Stärkung von Verständnis und Handlungsfähigkeit von Kunstschaffenden und Öffentlichkeit durch zugängliche ästhetische Erfahrungen
- Strengthening the understanding and agency of artists and the public through accessible aesthetic experiences
- Wissens- und Technologietransfer von künstlerischer Praxis zu Kulturinstitutionen und Entscheider:innen in Politik und Wirtschaft
- Knowledge and technology transfer from artistic practice to cultural institutions and decision-makers in politics and business
Messbare Projektindikatoren
Measurable Project Indicators
Inszenierung 2028Production 2028
Multimediale, repertoirefähige Inszenierung am Residenztheater in 2028A multimedia, repertoire-ready production at the Residenztheater in 2028
Open SourceOpen Source
Open-Source-Veröffentlichung des KI-Systems Kaspar.aiOpen-source release of the Kaspar.ai AI system
Zukünftige AnwendungFuture Application
Zukünftige Anwendung von K.ai durch andere KunstschaffendeFuture use of K.ai by other artists
VeranstaltungenEvents
Mindestens 8 Transferveranstaltungen, davon vier mit öffentlicher WirksamkeitAt least 8 knowledge-transfer events, four of them with public impact
KI-Technologien & Umsetzung
AI Technologies & Implementation
Funktionen des Systems K.ai
Functions of the K.ai System
Aufnahme & WiedergabeRecording & Playback
Aufnahme, Wiedergabe und Verfremdung digitaler Spieler:innenRecording, playback, and stylization of digital performers
InteraktionInteraction
Interaktionspartner:in für Improvisation und DialogInteraction partner for improvisation and dialogue
ChoreografieChoreography
Choreografisches Werkzeug zur szenischen EntwicklungChoreographic tool for scenic development
Virtuelle UmgebungenVirtual Environments
Generatives System für virtuelle UmgebungenGenerative system for virtual environments
Eingesetzte KI-Technologien
AI Technologies Used
- Transformer-basierte Sprachmodelle (LLMs) mit RAG-basierter Kontexterweiterung
- Transformer-based language models (LLMs) with RAG-based context expansion
- Seq2Seq-Systeme für Spracherkennung und -synthese
- Seq2Seq systems for speech recognition and synthesis
- Diffusions-Modelle für Erzeugung von Bild und Video
- Diffusion models for image and video generation
- Neurale Netzwerke für Bewegungserkennung aus Video (Motion Capture)
- Neural networks for motion detection from video (motion capture)
Die von Manuel Hendry und seinem Team entwickelte Software für das Theaterprojekt Friendly Fire at the Shrink und seine wissenschaftlich-künstlerische Dissertation sind Grundlagen für die Programmierung von K.ai. Hinsichtlich des audiovisuellen Materials kommen cineastische Methoden der Virtuellen Produktion zum Einsatz – ein Gebiet, auf dem die Filmuni Expertin ist.
The software developed by Manuel Hendry and his team for the theater project Friendly Fire at the Shrink, together with his scientific-artistic dissertation, form the basis for programming K.ai. For the audiovisual material, cinematic methods of virtual production are used — a field in which the Filmuniversität has expertise.
Produktionsablauf
Production Process
«Kaspar 2028» erweitert den theatralen Probenprozess zu einem zweijährigen, interdisziplinären Experiment. Die szenische Produktion, die Besetzung der künstlerischen Positionen und die Durchführung der Proben verantwortet das Residenztheater. Die Technologie-Entwicklung erfolgt an der Filmuniversität, die uns ihre moderne Infrastruktur zur Verfügung stellt. An der Arbeit beteiligt sind Studierende sowie Gäste aus der Theater- und Kunstwelt. Für 3D-Körpermodellierung und -scanning kooperieren wir mit dem Tübinger Start-up Meshcapade.
“Kaspar 2028” expands the theatrical rehearsal process into a two-year, interdisciplinary experiment. The Residenztheater is responsible for the stage production, the casting of the artistic positions, and the running of the rehearsals. Technology development takes place at the Filmuniversität, which provides us with its modern infrastructure. Students as well as guests from the theater and art worlds are involved in the work. For 3D body modeling and scanning, we are collaborating with the Tübingen-based start-up Meshcapade.
Gemeinwohlorientierter Ansatz
A Common-Good-Oriented Approach
Wir etablieren das Theater als Labor für eine kollaborative Technikkultur. In Verbindung mit dem MA Creative Technologies und dem CX Studio schaffen wir ein Ökosystem und "best practices" für praxisorientierte Theaterarbeit mit GenAI – als Alternative zur Abwanderung kreativer Talente in die kommerzielle Medienbranche.
We are establishing the theater as a laboratory for a collaborative culture of technology. Together with the MA Creative Technologies and the CX Studio, we are creating an ecosystem and "best practices" for practice-oriented theater work with GenAI — as an alternative to the migration of creative talent into the commercial media industry.
Alle Prozesse werden dokumentiert und veröffentlicht. Die modulare GenAI-Pipeline ist auf verschiedene Bühnen- und Kunstformate übertragbar. Workshops vermitteln Theater- und Kunstschaffenden praxisnah den Zugang zu GenAI-gestützter Kreation mit K.ai.
All processes are documented and published. The modular GenAI pipeline is transferable to a variety of stage and art formats. Workshops give theater and art practitioners hands-on access to GenAI-supported creation with K.ai.
Zentrale Herausforderungen
Key Challenges
K.ai soll künstlerisch produktiv werden, ohne den Probenprozess zu dominieren. Die Schnittstelle zwischen Schauspiel, Regie und GenAI soll intuitiv und effizient bedienbar sein. Dies erfordert einen kontinuierlichen Austausch zwischen verschiedenen Arbeitskulturen – Theater, Film, Forschung und Technologieentwicklung – sowie präzise Dokumentation für nachhaltige Nutzung.
K.ai is meant to become artistically productive without dominating the rehearsal process. The interface between acting, directing, and GenAI should be intuitive and efficient to operate. This requires continuous exchange between different working cultures — theater, film, research, and technology development — as well as precise documentation for sustainable use.
Anspruchsvoll ist zudem der Einsatz eines ethisch auf Basis «fairer Daten» trainierten Sprachmodells – nach unseren Recherchen wäre dies kl3m. Zur Bestimmung und Reduktion des ökologischen Fußabdrucks greifen wir auf Lena Giesekes Vorarbeiten zu grüner Filmproduktion zurück.
Equally demanding is the use of a language model trained ethically on the basis of "fair data" — according to our research, this would be kl3m. To measure and reduce the ecological footprint, we draw on Lena Gieseke's prior work on green film production.
Wissenstransfer
Knowledge Transfer
Absicht des Projekts ist die Befähigung und Begeisterung von Theater- und Kunstschaffenden, die Künste als experimentellen und kritischen Raum für GenAI zu nutzen. Unter Miteinbezug der multidisziplinären und internationalen Netzwerke der Projektpartner:innen umfasst Kaspar 2028:
The project aims to empower and inspire theater and art practitioners to use the arts as an experimental and critical space for GenAI. Drawing on the multidisciplinary and international networks of the project partners, Kaspar 2028 comprises:
Website & DokumentationWebsite & Documentation
Projektbezogene Website mit Blog, Code und TutorialsA project website with blog, code, and tutorials
WorkshopsWorkshops
Vier öffentliche Workshops in BabelsbergFour public workshops in Babelsberg
Work-in-ProgressWork-in-Progress
Vier Work-in-Progress-Formate in MünchenFour work-in-progress formats in Munich
PublikationPublication
Wissenschaftlich-künstlerische PublikationA scientific-artistic publication
PremierePremiere
Repertoirefähige Theateraufführung «Kaspar» am ResidenztheaterA repertoire-ready theater production of “Kaspar” at the Residenztheater
AbschlusskonferenzClosing Conference
Panel, Live-Demo und Publikumsgespräche am Residenztheater MünchenPanel, live demo, and audience discussions at the Residenztheater München
Das Residenztheater verpflichtet sich nach Projektende, die aus Projektmitteln angeschaffte Hardware weiter zu verwalten und dem Theaternetzwerk Digital für Workshops und Weiterbildungen unentgeltlich zur Verfügung zu stellen.
After the project ends, the Residenztheater commits to continuing to maintain the hardware acquired with project funds and to making it available free of charge to the Theaternetzwerk Digital for workshops and further training.