'Gaussian splatting' cukup keren

• Artikel tentang makalah berjudul "Real-Time Radiance Field Rendering using 3D Gaussian Splatting"
• Gaussian splatting adalah metode untuk merepresentasikan adegan 3D sebagai jutaan partikel yang memiliki posisi, rotasi, ukuran, opasitas, dan warna
• Partikel dirender sebagai Gaussian 2D di ruang layar, bukan sebagai bola yang diperluas
• Penulis makalah mengembangkan metode untuk menghasilkan jutaan partikel yang merepresentasikan adegan yang dinyatakan melalui foto dengan menggunakan gradient descent dan diferentiable rendering
• Para penulis juga mengembangkan cara untuk merender jutaan partikel berskala ini dengan cepat
• Penulis artikel mengimplementasikan bagian visualisasi real-time Gaussian splatting di Unity dan sedang mempertimbangkan cara mengurangi ukuran data
• Artikel ini juga membahas sejarah Gaussian splatting dan penerapan sebelumnya, yang ditemukan sekitar tahun 2001-2002
• Penulis membagikan implementasi Gaussian splatting di GitHub, dan mencatat bahwa implementasi tersebut berfungsi tetapi tidak secepat implementasi resmi
• Penulis juga menyebutkan bahwa ukuran data dan penggunaan memori adalah pertimbangan penting saat menggunakan Gaussian splatting, dan adegan contoh yang digunakan dalam artikel memerlukan data sebesar 1.5GB di disk

[GN⁺]

Opini Hacker News

• Artikel tentang potensi gaussian splatting, teknik untuk merekonstruksi adegan 3D dari banyak gambar, memicu antusiasme di kalangan penggemar teknologi
• Gaussian splatting dianggap sebagai alat yang menjanjikan untuk merekonstruksi lingkungan masa lalu, dengan kemungkinan membangkitkan gelombang nostalgia
• Menggunakan gradient descent dan "differentiable rendering", menghindari penggunaan istilah yang berkaitan dengan "neural", dan sebagian pembaca memuji hal ini karena tidak sekadar mengikuti tren
• Namun, sebagian pembaca berpendapat bahwa menghindari jaringan saraf mungkin bukan tujuan yang layak dipuji, karena ada alasan mengapa teknologi itu populer dan merupakan aproksimator fungsi yang baik
• Artikel tersebut juga menyebut point-based rendering, inti dari sistem partikel dalam game, dan para pembaca menyoroti perubahan terbaru pada sistem partikel di game modern
• Sebagian pembaca mempertanyakan apakah gaussian splatting dapat mendukung pencahayaan dinamis dan pergerakan, karena adegan/bidang radiasi biasanya statis dan memiliki pencahayaan bawaan
• Teknik ini dibandingkan dengan konsep braindance di Cyberpunk 2077, yang memungkinkan pemain bergerak di dalam memori visual orang lain
• Para pembaca menantikan implementasi pertama rendering 3D Gaussian splatting yang dioptimalkan untuk WebGPU serta kompresi dan dekompresi data adegan yang efisien
• Sebagian pembaca membagikan materi tentang cara menggunakan gaussian splatting, misalnya panduan pemula di YouTube
• Teknik ini bukan hal baru; ada rujukan ke splatting untuk volume rendering pada 1991 dan penyebutan penggunaan permukaan iso voxel pada akhir 1990-an
• Para pembaca penasaran dengan state of the art untuk structure from motion, teknik yang mengubah video suatu ruang menjadi adegan 3D.