- Transfer 4K True Lies tampak lumer dengan tekstur berlebihan seperti video YouTube dari rekaman lama yang di-upscale AI, dan jejak pemrosesan serupa juga ditunjukkan pada Aliens, The Abyss, dan Titanic
- Park Road Post, yang menangani pekerjaan ini, adalah anak perusahaan WingNut Films milik Peter Jackson, dan sebelumnya sudah aktif menggunakan restorasi berbasis machine learning dalam They Shall Not Grow Old dan The Beatles: Get Back
- True Lies diketahui memiliki pemindaian 4K terbaru berbasis negatif kamera asli, sehingga masih menjadi pertanyaan mengapa pemrosesan AI diperlukan
- Fokus kritik bukan pada teknologinya sendiri, melainkan pada input yang tidak tepat dan koreksi otomatis; kualitas gambar bisa runtuh ketika teknik ini menggantikan proses capture, deinterlace, dan arsip yang benar
- Penghilangan noise dan film grain yang berlebihan menyesuaikan film dengan standar ketajaman digital, dan berisiko membuat penonton melupakan tekstur asli film
Masalah yang Dipicu Transfer 4K True Lies
- Video YouTube yang memasukkan rekaman lama ke AI upscaler untuk diberi warna atau diinterpolasi menjadi 60fps sering kali terlihat lumer dengan warna yang berlebihan
- Transfer terbaru True Lies dikritik karena teksturnya mirip video seperti itu
- Dalam adegan bergerak, kadang bisa terlihat baik-baik saja sesaat
- Detail seperti kerutan kulit, foto anak, tepi map, dan pipi terlihat tidak alami
- Permukaannya terlalu mulus sekaligus tajam, memberi kesan seperti gambar buatan AI dengan batas yang tidak selaras
- Transfer Aliens dan The Abyss tidak separah True Lies, tetapi dinilai membuat kulit tampak steril dan seperti lilin, serta film grain terlalu banyak dihapus
- Transfer terbaru Titanic juga menerima pemrosesan serupa, dan respons online terbelah
Park Road Post dan Kelanjutan Restorasi ala Peter Jackson
- Pekerjaan restorasi kali ini diketahui ditangani oleh Park Road Post, anak perusahaan WingNut Films milik Peter Jackson
- Terkait Park Road Post, They Shall Not Grow Old dan The Beatles: Get Back disebut sebagai preseden penting
- They Shall Not Grow Old mencoba membuat rekaman Perang Dunia I terlihat dalam konteks yang lebih modern dengan melakukan upscale dan pewarnaan
- The Beatles: Get Back menampilkan proses pembuatan lagu The Beatles dari materi syuting Let It Be karya Michael Lindsay-Hogg dan adegan yang belum pernah dirilis
- Kedua karya tersebut merekontekstualisasi rekaman lama, dan dalam prosesnya menggunakan machine learning secara agresif
Tekstur Asing yang Dihasilkan Efek Restorasi
- Dalam They Shall Not Grow Old, muncul penilaian bahwa gerakan para prajurit yang diinterpolasi tampak seperti meleleh dan tidak stabil
- Digital noise reduction tidak konsisten, sehingga film grain tersisa di beberapa bagian dan hilang di bagian lain
- Grain pada wajah prajurit memberi kesan seperti sisik reptil yang menempel mengikuti wajah
- The Beatles: Get Back juga memiliki masalah serupa, meski tidak separah itu
- Rambut dan mantel bulu terlihat sekaligus berkilau dan berminyak
- Kerutan pada kulit dan pakaian memiliki bobot yang tidak alami
- Tepi objek tampak saling tersangkut atau melebur
- Struktur grain lebih alami daripada They Shall Not Grow Old, tetapi tampak seperti ditambahkan secara artifisial di atas gambar yang telah mengalami noise reduction berat
- Get Back sangat sukses, dibantu oleh fakta bahwa satu-satunya versi Let It Be yang mudah diakses hanyalah transfer DVD berkualitas buruk, serta kekuatan 60 jam rekaman yang tidak terpakai
Masalahnya Ada pada Cara Penerapan, Bukan Teknologinya
- Ini bukan kritik bahwa teknologi video berbasis machine learning sama sekali tidak berguna
- Nvidia DLSS dan teknologi pesaingnya umumnya dianggap bekerja dengan baik pada game yang telah dilatih
- Untuk pekerjaan interpolasi yang jarang, digunakan Flowframes
- Ada pengalaman menggunakan waifu2x dan chainner saat memperbaiki gambar diam dari sumber yang buruk
- Ada juga basis data model AI upscaling
- Masalah muncul ketika teknologi seperti ini menggantikan pekerjaan ingest yang benar
- “Crap in, crap out” tetap berlaku
- Untuk menangkap VHS dan Laserdisc dengan kualitas setinggi mungkin, diperlukan pengetahuan tentang capture dan deinterlace yang benar
- Sikap orang yang paham pekerjaan video tetapi berkata “Just use Topaz” hampir selalu dianggap berujung pada hasil buruk
Benturan antara Pekerjaan Arsip yang Baik dan Pemrosesan AI
- Video yang ditransfer dengan baik bisa terasa sangat mengesankan hingga membuat terpukau
- Praktik arsip yang baik membutuhkan banyak pengetahuan organisasi dan tenaga kerja, dan jika dilakukan dengan benar, hampir menyerupai sebuah seni
- Sebagian besar penerapan AI modern bekerja ke arah pengurangan tenaga kerja
- Alih-alih mentransfer tape dengan benar, kini ada pilihan untuk membiarkan komputer menebak secara buruk
- Bahkan ketika input yang buruk masuk, hasil buruknya tidak selalu tampak apa adanya
Apakah True Lies Memerlukan Pemrosesan AI?
- True Lies dianggap tidak perlu melalui pemrosesan AI
- Menurut The Digital Bits, Park Road Post memiliki pemindaian 4K terbaru yang dibuat dari negatif kamera asli
- Situs web Park Road Post juga menyebutkan bahwa mereka memiliki scanner film Lasergraphics Director 10K
- Dengan kondisi seperti ini, masih menjadi pertanyaan apa tujuan menambahkan AI pada film yang tampak baik-baik saja
Pelestarian Film Tidak Cukup Hanya dengan Persetujuan Sutradara
- Perdebatan di forum Blu-ray mudah memanas, tetapi dalam kasus tertentu, sutradara bisa saja keliru tentang tampilan filmnya sendiri
- George Lucas disebut sebagai contoh utama, dan James Cameron juga dianggap tidak lepas dari persoalan dalam pemrosesan filmnya sendiri
- Wong Kar-wai juga disebut sebagai contoh bermasalah dalam remaster terbaru seperti Ashes of Time dan In The Mood For Love
- Cameron diketahui menyetujui remaster tersebut secara pribadi
- Dalam kondisi langka seperti ini, perlu dipertanyakan apakah sutradara benar-benar mewakili kepentingan terbaik filmnya sendiri
Masalah Ketika Ketajaman Digital Menjadi Standar untuk Film
- Hal yang paling meresahkan adalah banyak orang mungkin menganggap hasil seperti ini tampak cukup bagus
- Sebagian penonton dikritik karena menyukai media yang terlalu mulus, cepat, ber-frame-rate tinggi, dan digosok bersih
- Kamera smartphone pun tidak lagi sekadar menangkap gambar, melainkan menghitung dan mengoptimalkannya
- Film digital tidak hanya berhenti pada tampilan yang setajam kristal dan tanpa kehidupan; rekaman masa lalu pun kini disesuaikan dengan standar itu melalui penghilangan noise dan pengelolaan grain
- Situasi ketika orang tidak lagi ingat seperti apa seharusnya film terlihat pada asalnya bisa menjadi kondisi yang nyaman dan menguntungkan
Agar Pelestarian Tidak Menjadi Penghancuran
- Tidak dianggap bahwa orang-orang yang terlibat dalam pelestarian film sedang berusaha menghancurkan film
- Para pihak terkait mungkin telah bekerja keras dan memikirkan kepentingan terbaik film tersebut
- Namun, sifat restorasi bisa berubah drastis, dan sebagian perusahaan bisa dibutakan oleh teknologi baru hingga menghasilkan pekerjaan yang destruktif alih-alih restoratif
- Jika memungkinkan, tidak terlihat solusi yang jelas selain memisahkan pelestarian film dari motif keuntungan
- Dulu banyak game berusaha terlihat seperti Aliens, tetapi kini Aliens justru terlihat seperti video game, dan ini tetap menjadi perubahan yang mengusik
1 komentar
Komentar Hacker News
Saya bukan pakar film, tetapi saya rasa saya punya selera, dan proyek-proyek Beatles belakangan ini sudah beberapa kali membuat saya menangis
Semua orang berhak jadi elitis di blog filmnya sendiri, tetapi tidak menyertakan satu pun frame pembanding dari rilis asli sehingga pembaca tidak bisa menilai A/B sendiri sangat melemahkan argumen tulisan ini
Saya tidak setuju dengan kebencian terhadap film pendek vintage yang di-upscale dan diwarnai; malah saya sangat menyukainya. Di keluarga kami, menonton klip-klip ini sekarang hampir jadi tradisi Natal, dan secara pribadi favorit saya adalah https://www.youtube.com/watch?v=EQs5VxNPhzk
Saya langsung merasa, “Ya, ini benar-benar terlihat seperti karakter Pixar,” dan sadar bahwa saya sudah cukup lupa seperti apa tampilan asli film itu. Saya tidak menganggap sudut pandang ini sebagai reaksi yang berlebihan
Analogi yang pas: kita sebenarnya bisa membaca teks aslinya utuh, tetapi malah memilih membaca versi yang diringkas oleh GTP lalu diperpanjang lagi ke panjang semula. Saya jadi bertanya-tanya apa yang didapat dan apa yang hilang, dan kenapa kita harus mengutip versi hasil konversi GTP alih-alih kata-kata aslinya
Artinya, ini kurang lebih seperti “IMAX-nya era 1890-an”: https://www.youtube.com/watch?v=2Ud1aZFE0fU
The Matrix juga dirusak oleh color grading yang sangat buruk pada transfer 4K-nya
Tulisan ini setidaknya mencampur tiga teknik, dan tidak semuanya dipakai pada semua video
They Shall Not Grow Old juga melakukan pewarnaan dan penyesuaian waktu. Rekaman 100 tahun lalu direkam dengan film yang digulung memakai engkol tangan, sehingga jumlah frame per detik sangat bervariasi, dan terutama adegan berjalan mudah terlihat aneh dibandingkan video modern
Pemegang hak kekayaan intelektual, studio film besar, dan layanan streaming tidak bisa dipercaya baik dari sisi ketersediaan maupun akurasi
True Lies dan Titanic yang disebut di artikel itu kemungkinan juga dikerjakan Digital Domain pada zamannya, dan pada era 90-an hingga 2000-an, meskipun plate yang direkam ke film secara teori bisa beresolusi tinggi saat dipindai, efek visualnya kemungkinan besar memang dirender dan dikirim sesuai resolusi asli 2K
Jadi, jika rilis 4K “dituntut”, hampir pasti perlu upscaling kecuali vendor efek visual aslinya merender ulang dan mengomposisikan ulang lalu mengirimkannya dalam 4K. Saya pernah mendengar kasus seperti itu pada rilis ulang Star Wars atau beberapa pekerjaan Pixar, tetapi itu tidak umum
Kedua, restorasi itu menjembatani jurang antara 1914 dan 2014. Film hitam-putih lama mudah terasa artifisial dan jauh, tetapi versi yang diwarnai dan diinterpolasi membuat para serdadu terasa sebagai manusia berdarah daging. Pesan “ini bisa terjadi juga pada Anda” mungkin sulit disampaikan sekuat itu hanya dengan rekaman aslinya
Sekarang penghilangan noise dan upscaling sama-sama diproses dengan AI, dan sering dilakukan dalam tahap yang sama
Tidak mungkin True Lies tidak mampu menopang transfer 4K. Seperti yang ditunjukkan Criterion, bahkan cetakan 35mm dari tahun 1950-an dan 1960-an bisa menjadi dasar yang sangat baik untuk HD/4K
Ini adalah penyuntingan subjektif yang mengubah hakikat karya, dan merupakan upaya untuk menyesuaikannya dengan mata penonton modern
Tulisan ini terasa nyaris ditujukan hanya untuk para penggemar film. Seharusnya dimulai dengan video perbandingan yang jelas menunjukkan apa sebenarnya yang dianggap penulis sebagai masalah
Selain adegan folder itu, saya tidak terlalu paham maksudnya hanya dari tangkapan layar yang diperkecil. Baru setelah menonton video Beatles Now and Then [1], saya sadar bahwa saat ada gerakan hasilnya terasa jauh kurang alami, dan pencahayaan buruk serta tekstur seperti lilin jadi lebih menonjol
[1] https://www.youtube.com/watch?v=Opxhh9Oh3rg
Semuanya mulai tampak seperti dibentuk dari imajinasi alih-alih benar-benar direkam, dan dipenuhi artefak buatan yang membuat orang-orang terlihat seperti alien yang sedang meniru manusia. Kadang saat melihat wajah yang terasa menyeramkan, saya sampai punya reaksi naluriah berupa rasa mual dan penolakan
Contoh-contohnya terlihat cukup gamblang bagi saya, jadi saya agak heran orang-orang ingin perbandingan berdampingan, tetapi memang menarik bahwa tiap orang menangkap hal yang berbeda dari sebuah gambar
Pilihan VPN yang biasa saya pakai tetap tidak bisa menghindari pesan “The uploader has not made this video available in your country”
Imagine there’s no countries....
Saya melihat ini bukan sekadar masalah “selera”, melainkan soal kemurnian dan keaslian
Teknik seperti AI upscaling, pewarnaan, dan interpolasi semuanya menambahkan informasi yang semula tidak ada. Pada titik itu, Anda sudah tidak lagi melihat media yang asli
Memindai ulang film asli pada resolusi setinggi mungkin untuk menangkap sebanyak mungkin informasi yang memang ada di dalam film itu adalah hal yang baik, tetapi menambahkan informasi yang sejak awal tidak ada berarti sudah melewati batas
Ini sama seperti fitur “motion smoothing” mengerikan pada TV modern. Fitur itu aktif secara default dan membuat film terlihat seperti drama TV, sementara interpolasi frame menambahkan informasi yang tidak pernah ada dan juga tidak dimaksudkan oleh sutradara
Kalau sebuah naskah kuno tidak menyebut warna pakaian sang kaisar, kita tidak akan “menginterpolasikan” warna yang kita bayangkan ke dalam edisi baru. Itu akan secara universal dianggap sebagai perusakan teks, tetapi para pewarna foto tampaknya mengira mereka sedang memberi kontribusi kepada dunia saat melakukan hal yang sama pada foto hitam-putih
Media sejarah menarik dan bernilai justru karena pada akhirnya ia menyampaikan informasi dari zamannya. Itulah sebabnya versi yang direstorasi secara berlebihan tidak menarik. Terlalu banyak tercemar oleh informasi palsu atau yang dasarnya lemah
Waktu saja sudah cukup merusak; kita tidak perlu menambahkannya lagi. Ini adalah versi modern dari ornamen dan penggelembungan historis, yang hanya memelintirnya menjadi setengah kebenaran yang nyaman dilihat dan menarik, alih-alih menyampaikan kebenaran nyata yang lebih jelek
Alat-alat ini lebih dekat pada alat penghias daripada alat restorasi. Restorasi yang baik benar-benar “memulihkan” informasi. Jika ada halaman hilang atau kesalahan pada manuskrip tua, kita melengkapinya dengan bagian yang sama dari manuskrip lain; begitu juga goresan pada frame film seharusnya ditambal memakai frame yang sama dari cetakan lain
Film yang dibuat pada 1990-an tidak perlu terlihat seperti dibuat pada 2020-an. Sama seperti lukisan Rembrandt tidak perlu terlihat seperti dibuat dengan Photoshop
Hal inti yang sama-sama dimiliki AI upscaling dan gambar generatif dengan contoh-contoh di artikel adalah proses penghilangan noise digital yang agresif. Dalam pembahasan video ini sering disebut DNR, dan itulah juga alasan versi 4K Terminator 2 yang terkenal buruk tampak seperti lilin
Dalam kasus T2, setidaknya itu didasarkan pada versi 3D, dan proses stereoskopi memang membutuhkan penghilangan noise semacam itu
Ultra HD 4K Blu-ray Disc hadir dalam tiga kapasitas: BD-50, BD-66, dan BD-100, dan menurut kesan saya dua yang terakhir lebih umum. Rilis yang durasinya tidak terlalu panjang kadang juga di-encode agar muat pada disk yang lebih murah dan berkapasitas lebih kecil
Ada juga fakta bahwa streaming dan encoding digital online selalu dioptimalkan untuk ukuran file. Menurut sebuah perbandingan di forum Blu-Ray.com, bitrate maksimum iTunes sekitar 31Mbps, termasuk yang paling tinggi, tetapi itu masih setara level Blu-ray 1080p. Sebagai perbandingan, Ultra HD Blu-ray bisa mencapai 90Mbps
Ironisnya, saat ada film seperti Blade Runner: Final Cut yang butiran film aslinya benar-benar dipertahankan, saya juga pernah melihat reaksi anggota keluarga yang merasa grain-nya terlalu banyak
Menurut saya, berkurangnya penolakan dari kalangan nonpenggemar juga ada kaitannya dengan fakta bahwa smartphone selama bertahun-tahun sudah otomatis menghilangkan noise dari foto
AV1 yang dipakai untuk streaming mungkin lebih efisien daripada H.265 yang umum di disk UHD, tetapi tidak sampai bisa menutup selisih bandwidth sebesar itu
Patut dicatat bahwa industri sekali lagi tertinggal dari pembajakan
Warp sharpening dan filtering sempat populer lebih dari 10 tahun lalu, lalu menjadi tren yang lewat pada masa ketika layar besar beresolusi tinggi sudah ada tetapi konten baru masih kurang. Seiring waktu, para moderator sampai pada kesimpulan bahwa sampah seperti itu harus diblokir
Jawabannya sederhana. Cara tampilan apa pun adalah keputusan artistik tentang “seharusnya terlihat seperti apa”. Setiap kali gambar ditampilkan ke layar, selalu ada pilihan yang diambil, dan keputusan artistik memerlukan selera. Banyak orang tidak punya itu
Orang biasa yang memainkan mainan menarik mengira rip yang difilter berlebihan tampak sangat keren, dan mungkin tidak memahami apa yang hilang. Orang-orang di halaman ini yang tidak paham mengapa objek tidak seharusnya tampak seperti baru saja digilas steamroller lalu diberi emboss tepi plastik, dan meminta perbandingan, mungkin benar-benar tidak bisa melihat bedanya
Bisnis tahu betul bahwa “selera”, “seni”, dan “kualitas” tidak penting. Yang penting adalah minat terhadap produk, dan kalau laku itu sudah cukup
Rahasianya adalah banyak orang tetap sama puasnya meski menonton konten yang memuat 8 camrip dalam 1 DVD. Maksudnya situs streaming mengerikan dengan iklan di mana-mana, yang mengaku “FullHD” padahal bitrate-nya nyaris setingkat dial-up
Namun ada insentif untuk membuat mereka membeli TV 4K·8K·3D·HDR, mengejar rilisan yang “lebih baru dan lebih baik”, dan berlangganan layanan streaming yang “lebih baru dan lebih baik”. Cuci otak soal “teknologi baru” membuat mereka yakin telah memperoleh kemewahan besar. Jika diberi tahu bahwa itu sebenarnya payah, yang tersentuh bukan cuma soal kualitas tertentu, melainkan pilihan hidup dan keyakinan mereka
Sampai-sampai saya berharap masih punya box set VHS lama
Menonton video yang di-upscale bisa menyenangkan sebagai semacam eksperimen pikiran untuk membayangkan seperti apa kehidupan di zaman lain, dan menurut saya itu tidak terlalu merusak nilai film aslinya
Dan They Shall Not Grow Old dibuat pada 2018, sebelum ledakan AI belakangan ini. Saat itu film itu eksperimental dan ambisius, dan sekarang rasanya bisa dibuat jauh lebih baik lagi
Tapi saya juga ingin melihat versi yang diwarnai dan dipertajam dengan AI
Rekaman asli membuat mereka tampak seperti orang-orang lucu dan asing dari dunia yang benar-benar berbeda
Video AI yang baru membuat saya merasa mereka secara emosional adalah manusia yang sama seperti saya, dan itu jauh lebih dekat dengan kebenaran
Jika materinya cukup populer, kita bisa masuk ke era ketika upscale dan perbaikan dilakukan ulang lalu dirilis kembali setiap 4~6 tahun setiap kali teknologinya terus membaik
Secara sinis, pemegang hak kekayaan intelektual akan mencoba memeras lebih banyak uang dari pemiliknya setiap kali ada lompatan teknologi besar. Secara optimistis, kita bisa mulai melihat film dan TV populer sebagai karya evergreen yang menjadi lebih baik seiring waktu. Kalau dianalogikan dengan software, kita umumnya setuju bahwa software tidak pernah benar-benar “selesai”, dan biasanya itu hal yang baik
Terlihat benar-benar mengerikan, dan bagi orang yang harus membeli lagi beberapa versi rescan UHD Blu-ray setelah edisi resolusi rendah, ini hampir mustahil diterima secara menyeluruh
“Saat akhirnya melihat hasil transfer gambar yang dilakukan dengan benar, itu bisa begitu bagus sampai membuat tercekat. Praktik kearsipan yang baik membutuhkan banyak pengetahuan organisasi dan tenaga kerja. Jika dilakukan dengan baik, itu adalah seni, dan orang-orang yang mengerjakannya punya kecintaan mendalam pada pekerjaannya. Namun sebagian besar penggunaan AI modern justru mengeluarkan tenaga kerja itu dari persamaan”
Saya merip media fisik ke perpustakaan digital, dan saat berurusan dengan transfer film, itu langsung terasa. Karena kompresinya jadi kacau
Grain dan noise yang secara inheren ada pada film memang tidak bisa dikompresi dengan baik. Jadi film-film upscale AI seperti ini terasa dibuat bukan untuk kita, melainkan agar penyedia streaming bisa sedikit menghemat bandwidth
Selain itu, dulu film mahal sehingga sutradara membuat film 90 menit yang padat lalu selesai. Sekarang film 2 jam, 3 jam, 4 jam terus memanjang tanpa henti
Itu kebalikan dari sekarang, yang ingin mulai cepat sebelum penonton pergi menonton hal lain. Tentu saja mereka tidak menyia-nyiakan film, tetapi film lama juga berlarut-larut. Hanya saja itu bisa dilihat bukan sebagai berlarut-larut, melainkan proses membangun suasana dan emosi film
Harus diingat bahwa para sutradara adalah seniman, film ada demi seni, bukan demi penonton, dan tidak banyak upaya menyenangkan selera penonton
Film 4K berdurasi 2 jam yang sudah halus dan blocky bisa di-encode ke sekitar 10GB tanpa tampak terlalu berbeda dari Blu-ray berkapasitas besar. Transfer film 4K yang bagus mulai terlihat aneh jika target ukuran file turun di bawah 30GB, atau bahkan sebelumnya
Meski begitu, saat encoding untuk streaming dari sumber yang bagus, hasilnya tetap bisa cukup baik, jadi tidak perlu memulai dari sumber yang buruk. Tinggal tambahkan satu tahap untuk membuatnya buruk sebelum encoding. Tetapi kalau begitu, ada risiko stream 4K “berkualitas tinggi” akan dibandingkan dengan sumber asli yang jauh lebih baik, sehingga terlihat sebenarnya sangat buruk untuk ditonton
Jumlah film yang diambil saat syuting jauh lebih banyak beberapa orde besaran daripada hasil akhir, dan adegan yang sama diambil berulang kali demi mendapatkan take yang bagus. Film dengan durasi tayang lebih panjang juga tidak selalu memerlukan waktu syuting yang lebih lama daripada film pendek
Saya sendiri tidak punya emosi yang kuat terhadap opini dalam tulisan blog itu, tetapi saya ingin memuji cara penulisannya
Ini topik yang secara pribadi bahkan tidak pernah saya pikirkan dan juga tidak terlalu saya minati, tetapi sudah cukup lama sejak terakhir kali saya membaca tulisan seperti ini sampai habis. Judulnya menarik perhatian saya, dan sisanya juga membuat saya terus membaca
Penulis menganggap ini buruk, dan setelah pembaca selesai membaca, mereka akan mengetahui fakta itu dengan jelas