Πώς η Google DeepMind ανακατασκεύασε το ατόφιλμαρο γκολ του Πελέ του 1959 από αρχεία και κασκαντερικά πλάνα

Ένα γκολ χωρίς πλάνα, ανακατασκευασμένο από 3.600 εικόνες

Στις 2 Αυγούστου 1959, ο Πελέ σκόραρε αυτό που η Google περιγράφει ως τρία συνεχόμενα «σομπρέρο» πάνω από αμυντικούς και τον τερματοφύλακα, χωρίς η μπάλα να αγγίξει το έδαφος. Καμία κάμερα δεν το κατέγραψε. Για πάνω από 60 χρόνια, το «Gol da Rua Javari» υπήρχε μόνο στη μνήμη του κόσμου στο γήπεδο Mooca του Σάο Πάολο.

Το σημείο εκκίνησης εδώ δεν ήταν κάποιο prompt σε μοντέλο. Η Βραζιλιάνα ιστορικός Anita Lucchesi και η ομάδα της συγκέντρωσαν σχεδόν 2.000 ιστορικά τεκμήρια — σχέδια, οικογενειακά άλμπουμ, εφημεριδογραφικά διαγράμματα — και πήραν συνεντεύξεις από αυτόπτες μάρτυρες, δημοσιογράφους και την κοινότητα της Mooca. Συγκεντρώθηκαν πάνω από 3.600 ιστορικές εικόνες. Οι μάρτυρες ανακατασκεύασαν τη φάση από τη μνήμη τους χρησιμοποιώντας μακέτα του γηπέδου, αρχειακές φωτογραφίες και διαγράμματα.

Αυτή η φάση έρευνας είναι το κομμάτι που παραλείπουν οι περισσότερες ανακοινώσεις γεννητικής ΤΝ. Εδώ αποτελεί το θεμέλιο: το αρχειακό υλικό αναφέρεται επανειλημμένα ως το σημείο αναφοράς με βάση το οποίο ελέγχθηκε κάθε παραγόμενο καρέ.

Πρώτα το ζωντανό γύρισμα, μετά η γεννητική επεξεργασία

Η ομάδα της Google δεν ξεκίνησε με συνθετικά πλάνα. Γύρισαν ζωντανές σκηνές στο πραγματικό γρασίδι του γηπέδου Rua Javari, χρησιμοποιώντας βαριές δερμάτινες μπάλες και στολές πιστές στην εποχή. Αυτό το πραγματικό υλικό τροφοδοτήθηκε στη συνέχεια στα μοντέλα.

Η ομάδα αναφέρει τρεις συγκεκριμένες τεχνικές εργασίες: την αντιστοίχιση της εμφάνισης του Πελέ και της φανέλας με τον αριθμό 10 σε έναν σύγχρονο κασκαντέρ, την επανασχεδίαση του σύγχρονου γηπέδου ώστε να ταιριάζει με τον νεφελώδη καιρό και την αρχιτεκτονική εκείνης της ημέρας, και τη δημιουργία της ατμόσφαιρας του πλήθους και των ραδιακροατών. Καθεμία είναι μια οριοθετημένη μετασχηματιστική επεξεργασία πραγματικού υλικού και όχι μια ολοκληρωτική επινόηση.

Ο έλεγχος απόδοσης (Performance Control) και το πρόβλημα της αθλητικής χορογραφίας

Η πιο συγκεκριμένη τεχνική λεπτομέρεια είναι ο τρόπος με τον οποίο η Google χειρίστηκε την κίνηση του Πελέ. Τα γεννητικά μοντέλα είναι καλά στον φωτορεαλισμό, σημειώνει η ανάρτηση, αλλά η ακραία αθλητική χορογραφία είναι δύσκολο να πλαστογραφηθεί με πειστικό τρόπο. Η απάντηση ήταν το Performance Control, μια προσέγγιση βασισμένη στο Veo 3 που εξάγει ακριβή τρισδιάστατη γεωμετρία και κίνηση από έναν σύγχρονο κασκαντέρ για να καθοδηγήσει τη δημιουργία.

Για να γίνει αυτό επεξεργάσιμο, τα Gemini Omni και Veo χώρισαν κάθε σκηνή σε επίπεδα: ακριβής τρισδιάστατη σύλληψη κίνησης αποδοσμένη ως μπλε πλέγμα, οι απομονωμένοι ηθοποιοί και ένα καθαρό φόντο χωρίς τους παίκτες. Ο διαχωρισμός των παικτών από το περιβάλλον επέτρεψε στην ομάδα να τροποποιεί το καθένα ξεχωριστά — η διαφορά ανάμεσα σε ένα μεμονωμένο παραγόμενο κλιπ και ένα ελεγχόμενο παραγωγικό υλικό.

Ένα υβριδικό pipeline που καταλήγει σε μηχάνημα filmout

Η τελική επεξεργασία είναι το σημείο όπου αυτό μοιάζει με παραγωγή, όχι με πρωτότυπο. Τα πλάνα που δημιουργήθηκαν με ΤΝ βελτιώθηκαν με τα Gemini Omni και Nano Banana Pro μέσω προσαρμοσμένων εσωτερικών εργαλείων, και στη συνέχεια παραδόθηκαν σε παραδοσιακά εφέ οπτικών επιδράσεων (VFX) για τη σύνθεση της μπάλας, την ενσωμάτωση κόκκου φιλμ και την εξισορρόπηση χρωμάτων.

Το τελευταίο βήμα είναι αποκαλυπτικό: το ψηφιακό αποτέλεσμα περάστηκε από μηχάνημα filmout για να αποκτήσει την αισθητική του κινηματογράφου της δεκαετίας του 1950. Ο στόχος δεν ήταν να φαίνεται το υλικό καινούργιο, αλλά να φαίνεται σαν να ανήκε στο 1959.

Θα ήταν τόσο περήφανος αν έβλεπε όλο αυτό να συμβαίνει. Πάντα έλεγε ότι ήταν κρίμα που το γκολ δεν καταγράφηκε ποτέ. Έτσι, το να μπορούμε να το ζήσουμε ξανά, με όλη αυτή την τεχνολογία, είναι κάτι εκπληκτικό. — Flávia Kurtz, κόρη του ΠελέMontana Labs

Τι σημαίνει μια ελεγχόμενη ανακατασκευή για την εφαρμοσμένη γεννητική τεχνολογία βίντεο

Το ενδιαφέρον στοιχείο σε αυτό το έργο δεν είναι ότι το γεννητικό βίντεο μπορεί να παράγει ένα εντυπωσιακό κλιπ — είναι ότι η Google έχτισε μια δομή ελέγχου για να αποτρέψει το μοντέλο από το να αυτοσχεδιάζει. Η κίνηση προήλθε από έναν πραγματικό κασκαντέρ, το περιβάλλον και η εμφάνιση καθοδηγήθηκαν από 3.600 αρχειακές αναφορές, και το τελικό αποτέλεσμα πέρασε από συμβατικά εφέ οπτικών επιδράσεων και μια φυσική διαδικασία φιλμ πριν χαρακτηριστεί έτοιμο.

Για τις ομάδες που δημιουργούν με αυτά τα εργαλεία, το χρήσιμο μάθημα είναι ο καταμερισμός εργασίας: τα μοντέλα χειρίζονται την επανασχεδίαση, την αντιστοίχιση εμφάνισης και την ατμόσφαιρα, ενώ ο έλεγχος και η ακρίβεια προέρχονται από καταγεγραμμένη κίνηση, πολυεπίπεδα επεξεργάσιμα υλικά και πηγαίο υλικό επαληθευμένο από ανθρώπους. Η ανακατασκευή βρίσκεται πλέον στο Μουσείο Πελέ στο Σάντος — μια δήλωση για ένα ιστορικό γεγονός, γι' αυτό ακριβώς οι περιορισμοί είχαν μεγαλύτερη σημασία από τον φωτορεαλισμό.