'The Beatles: Get Back' menunjukkan bahwa teknologi deepfake tidak selalu jahat

Teknologi Deepfake adalah cara baru untuk melestarikan sejarah film. Jadi bolehkah saya memperkenalkan kepada Anda: Band Pembelajaran Mesin Sersan Pepper?

Meskipun itu jarang terjadi pada saya, saya kadang-kadang mengamati sesuatu yang merupakan momen penting yang sebenarnya bagi kemajuan teknologi dan dapat mengakui bahwa kemungkinan untuk kebaikan menggunakan teknologi tersebut mungkin lebih besar daripada potensi kejahatan.

Bagi saya, momen seperti itu adalah menonton The Beatles: Get Back, yang sekarang ditayangkan di Disney+. Saya telah mendengarnya dan melihat beberapa rekamannya perlahan-lahan dirilis selama sekitar satu tahun, tetapi saya tidak tahu berapa banyak teknologi yang telah diterapkan pada produksinya.

Saya telah melihat banyak film yang dibuat dari rekaman sejarah dari tahun 1960-an dan bahkan 1970-an dan 1980-an, dan begitu banyak materi sumbernya dalam kondisi buruk. Dalam banyak kasus, bahkan jika stok film dalam kondisi murni dan membutuhkan restorasi minimal, warnanya akan diredam. Audio dari periode waktu tersebut bisa mendesis dan sering terdengar seperti diproduksi menggunakan peralatan rekaman yang kurang profesional. Bahkan dengan pertunjukan langsung seperti Woodstock, arsip sering dalam kondisi kurang optimal karena sifat apa yang digunakan untuk merekamnya, seperti film 16mm - format ekonomis yang populer di kalangan penggemar saat itu yang tidak menua dengan baik. 

Dalam kasus ini, ketika Anda menonton konten seperti ini, pemirsa merasa seperti sedang melihat sesuatu yang, pada kenyataannya, bersifat arsip. Ada detasemen bahwa Anda melihat sejarah, bahwa rasanya seperti masa lalu, bahwa sesuatu terjadi beberapa dekade sebelumnya. Itu tidak terasa nyata atau terkini.

Sebelum menonton jam-jam pertama "Get Back", saya hanya sekali merasa dengan sebuah film saya terlempar kembali ke masa lalu dan menonton peristiwa seperti yang terjadi atau direkam kemarin. Film dokumenter Apollo 11, yang diproduksi oleh Todd Douglas Miller, dirilis pada tahun 2019, menggunakan cetakan 70mm murni dari NASA dan Arsip Nasional yang kemudian dipindai menjadi digital, menggunakan lebih dari 11.000 jam rekaman untuk memproduksi film tersebut.

Tapi yang membuatnya lebih signifikan dengan Get Back adalah kondisi materi sumbernya, 60 jam film 16mm dan 150+ jam audio NAGRA yang dibuat selama 21 hari pada tahun 1969 di Twickenham Studios di Inggris. Tidak seperti yang digunakan untuk Apollo 11, itu tidak dalam kondisi murni - itu pudar dan kasar, dan audionya buruk atau diredam. Jadi Disney membawa Peter Jackson, sutradara film The Lord of the Rings dan The Hobbit, untuk memulihkan video dan audio. 

Apa yang terjadi selanjutnya cukup mencengangkan. Jackson memiliki film kasar dan tidak jenuh yang diumpankan melalui algoritma komputer. Tiba-tiba, video yang dihasilkan memiliki warna-warna cerah dan cerah, dengan gambar tajam yang tampak seperti difilmkan kemarin, bukan pada tahun 1969. Tetapi yang lebih mengesankan daripada restorasi film, yang merupakan kemenangan teknis dengan sendirinya, adalah apa yang mereka lakukan dengan audio. Per Jackson, dalam wawancara Variety-nya:

"Bagi saya, pemulihan suara adalah hal yang paling menarik. Kami membuat beberapa terobosan besar dalam audio. Kami mengembangkan sistem pembelajaran mesin yang kami ajarkan seperti apa suara gitar, seperti apa suara bass, seperti apa suara suara. Bahkan, kami mengajari komputer seperti apa suara Yohanes dan seperti apa suara Paulus. Jadi kita bisa mengambil trek mono ini dan membagi semua instrumen yang bisa kita dengar vokal, gitar. Anda melihat Ringo memukul drum di latar belakang tetapi Anda tidak mendengar drum sama sekali. Itu memungkinkan kami untuk me-remix dengan sangat bersih."

Teknologi pembelajaran mesin yang digunakan di sini sangat mirip (jika tidak identik) dengan apa yang telah digunakan di masa lalu untuk deepfake, membuat video palsu terlihat dan terdengar nyata. Contoh utama dari ini adalah video demonstrasi pemenang Emmy Award yang diproduksi oleh Pusat Virtualitas Lanjutan MIT, "In Case of Moon Disaster," yang menggambarkan presiden saat itu Nixon membaca pernyataan yang disiapkan bahwa astronot Apollo 11 telah tewas dalam bencana. Untuk membuatnya, MIT menggunakan kemiripan dan pidato Nixon dari penampilan televisi dan memasukkannya ke dalam sistem pembelajaran mesin untuk mensintesis audio dan video dan menghasilkan film yang luar biasa.

Demonstrasi tersebut merupakan peringatan bahwa teknologi ini dapat digunakan untuk tujuan jahat. Saat ini ada upaya yang sedang berlangsung, seperti dengan Koalisi untuk Asal dan Keaslian Konten (C2PA), untuk membuat standar penyediaan konteks dan sejarah bagi media digital untuk membuktikan keaslian untuk aliran gambar atau video/audio tertentu di masa depan dapat ditetapkan, karena diharapkan teknologi ini akan digunakan jauh lebih banyak di masa depan.

Jadi bisakah teknologi deepfake ini digunakan untuk kejahatan? Ya. Tetapi jika Get Back membuktikan sesuatu, itu menunjukkan bahwa itu dapat digunakan untuk "pemulihan mendalam" juga. Banyak konten vintage dapat diperbaiki dengan cara ini, baik itu film asli atau rekaman arsip yang dapat membuatnya terlihat baru lagi -- atau yang paling segar yang pernah mereka lihat dan ditampilkan di platform pengiriman konten modern. 

Bisakah pembelajaran mesin digunakan secara positif dengan materi sumber arsip melalui restorasi mendalam alih-alih pemalsuan mendalam? Bicara kembali dan beri tahu saya.