Pelés verlorenes Tor: reconstructed
Am 2. August 1959 erzielte Pelé das schönste Tor seiner Karriere: drei aufeinanderfolgende „Sombreros“ (Lupfer) über Verteidiger und den Torwart, ohne dass der Ball jemals den Boden berührte. Aber dieser Moment wurde nie auf Film festgehalten.
Über 60 Jahre lang lebte das legendäre „Gol da Rua Javari“ in den Erinnerungen der Fans, die Zeug*innen waren – im Stadion. Nun haben wir in Zusammenarbeit mit Pelés Familie, Historiker*innen, Sportjournalist*innen und Fußballlegenden die Technologie von Google DeepMind genutzt, um dieses Stück Fußballgeschichte digital zu rekonstruieren. Das Werk entstand in enger Partnerschaft mit der Pelé Brand, die offiziell den Nachlass der Fußballlegende verwalten, bewahrt durch NR Sports.
Die Rekonstruktion des „Gol da Rua Javari“ wird als Mini-Dokumentarfilm präsentiert, der Interviews mit Historiker*innen, Journalist*innen, Pelés Familie, Augenzeugen und Fußballlegenden enthält, mit denen wir zusammengearbeitet haben, um die Geschichte eines unglaublichen Moments der Fußballgeschichte zu erzählen.
„Er wäre so stolz, all das hier zu sehen. Er sagte immer, es sei eine Schande, dass das Tor nie aufgenommen wurde. Es mit all dieser Technologie noch einmal erleben zu können, ist einfach unglaublich.“ — Flávia Kurtz, Pelés Tochter
Eine Legende rekonstruieren
Um die Geschichte exakt wiederzugeben, sammelten die brasilianische Historikerin Anita Lucchesi und ihr Team fast 2.000 historische Aufzeichnungen – von Bauplänen bis hin zu Familienalben. Sie interviewten Augenzeugen, Journalist*innen und die Gemeinde von Mooca (einem Stadtteil von São Paulo) und nutzten ein maßstabsgetreues Modell des Stadions, Archivfotos und Diagramme, um denjenigen, die das Tor gesehen haben, zu helfen, es aus ihrer Erinnerung heraus zu rekonstruieren.
Über 3.600 historische Bilder wurden gesammelt, um das Tor akkurat zu rekonstruieren.
Historisches Foto des „Gol da Rua Javari“, aufgenommen am 2. August 1959.
Anita Lucchesi, Historikerin, UERJ & Arka.
Archivfragmente: Zeitungen, Karten, Baupläne und Familienalben.
Historisches Foto des „Estádio da Rua Javari“ im Viertel Mooca, São Paulo.
Mitglieder der Juventus-Mannschaft und des Betreuerstabs im Rua-Javari-Stadion.
Foto der Juventus-Mannschaft im Jahr 1959.
Zeitungsbericht über das Spiel und Diagramm des Tores.
Vom Spielfeld zu Pixeln
Die Nachbildung dieses Tores erforderte eine Kombination aus praktischem Filmemachen und unseren fortschrittlichsten KI-Modellen: Veo, Gemini Omni und Nano Banana Pro.
Zuerst drehte unsere Crew Live-Action-Aufnahmen direkt auf dem Rasen des Rua-Javari-Stadions, unter Verwendung von schweren Lederbällen und zeitgemäßen Trikots. Diese physische Grundlage wurde dann in unsere Modelle eingespeist, um die digitale Transformation zu beginnen. Wir konzentrierten uns auf drei technische Kernexperimente:
- Charakter-Ersatz: Das genaue Mapping von Pelés Aussehen und seinem klassischen Trikot mit der Nummer 10 auf einen modernen Stunt-Spieler.
- Neugestaltung der Umgebung: Wir haben das moderne Stadion an das bewölkte Wetter und die Architektur von damals angepasst.
- Atmosphäre schaffen: zeigen, wie Fans, die das Spiel im Stadion verfolgten und die Radioübertragung zu Hause hörten, diesen Moment erlebt haben.
Pelés Original-Stollenschuhe aus dem Jahr 1959. Archivfotos und Artefakte dienten als Grundlage für alle KI-generierten Szenen und stellten die historische Genauigkeit im gesamten Film sicher.
Raphael Herrera, Fotograf im Javari-Stadion 1959.
Angelo Agarelli und Vicente Romano Netto, Juventus-Fans und Augenzeugen des Tores im Javari-Stadion.
Zuschauermassen füllen das Javari-Stadion während eines Juventus-Spiels.
Balance zwischen Fotorealismus und Performance-Kontrolle
Während generative Modelle beim Fotorealismus glänzen konnten, stellt die extreme athletische Choreografie einer Legende wie Pelé eine große Herausforderung dar. Um dies zu lösen, nutzten wir Performance Control – einen Ansatz basierend auf Veo 3, der präzise 3D-Geometrie und Bewegungen von einem modernen Stunt-Spieler extrahiert, um die Videogenerierung zu steuern. Durch die Kombination mit ergänzenden Workflows, die Nano Banana Pro und Gemini Omni nutzen, haben wir ein finales Video generiert, das Stadionarchitektur, Platzverhältnisse, Pelés Aussehen und das dynamische Spiel nahtlos zusammenführt.
Ausgehend vom originalen Live-Action-Video (oben links) unterteilen wir die Szene in separate, bearbeitbare Ebenen. Wir erfassen die exakte 3D-Bewegung der Athleten (oben rechts), isolieren sie von der Umgebung (unten links) und generieren einen sauberen Hintergrund ohne sie (unten rechts). Dies ermöglicht es uns, die Spieler und die Umgebung unabhängig voneinander zu modifizieren.
Um die Bearbeitung, VFX und die Videogenerierung zu optimieren, isolierten Gemini Omni und Veo das Schauspielermaterial, extrahierten den Hintergrund und generierten 3D-Blue-Mesh-Darstellungen (blaue Gittermodelle) der Spielerbewegungen.
Performance Control erstellt bearbeitbare 3D-Blue-Mesh-Renderings aus einem Eingabevideo, die mithilfe von Referenzbildern modifiziert werden können.
Aufbau einer hybriden Postproduktions-Pipeline
Für den letzten Schliff bauten wir eine hybride Pipeline auf, die KI-Generierung mit traditionellen visuellen Effekten (VFX) kombinierte. Mit internen Spezialtools verfeinerten wir die KI-generierten Aufnahmen mit Gemini Omni und Nano Banana Pro weiter und verließen uns dabei auf Archivmaterial, um sicherzustellen, dass jedes Detail stimmte. Der Workflow ging dann zu traditionellen VFX für Aufgaben wie Ball-Compositing, Grain-Integration (Filmkorn) und Farbabgleich über. Für einen letzten Hauch von Authentizität ließen wir den digitalen Output durch eine Ausbelichtungsmaschine (Filmout Machine) laufen, wodurch das unverwechselbare Aussehen und Gefühl des Kinos der 1950er-Jahre eingefangen wurde.
Das Unsichtbare sichtbar machen
Nichts kann die Erfahrung der Fans ersetzen, die live dabei waren, aber wir hoffen, dass dieses Projekt einem ikonischen Moment der Fußballgeschichte neues Leben einhaucht.
Diese Tor-Rekonstruktion wird nun im Pelé-Museum in Santos ausgestellt.
