Infinigen: Mewujudkan Dunia Fotorealistik Tak Terbatas dengan Generasi Prosedural

• Infinigen adalah "generator adegan 3D prosedural" yang menghasilkan data latih 3D berkualitas tinggi untuk penelitian computer vision.
• Berjalan berbasis Blender dan tersedia secara gratis sebagai open source di bawah lisensi BSD 3-Clause License.

Fitur Utama dan Karakteristik

Pembuatan Prosedural (Procedural)

• Semua bentuk dan material dihasilkan secara acak berdasarkan aturan matematis.
• Dapat menghasilkan struktur makro hingga detail paling halus.
• Memberikan variasi tak terbatas serta kemampuan kustomisasi.

Beragam Data (Diverse)

• Dapat membuat berbagai objek dan adegan, seperti tanaman, hewan, terrain, api, awan, hujan, salju, dan lain-lain dari dunia alami.
• Fokus awalnya menargetkan lingkungan alam, tetapi direncanakan untuk diperluas ke artefak dan lingkungan arsitektur.

Geometri Nyata (Real Geometry)

• Semua geometri detail diimplementasikan secara nyata, memastikan data 3D yang akurat.
• Tidak menggunakan teknik pseudo-detail seperti bump map dan normal map.
• Dioptimalkan untuk computer vision, khususnya penelitian computer vision 3D.

Anotasi Otomatis (Automatic Annotations)

• Menghasilkan anotasi berkualitas tinggi secara otomatis, termasuk optical flow, scene flow 3D, depth, surface normal, panoptic segmentation, dan occlusion boundaries.
• Menyediakan akses penuh ke seluruh proses rendering, sehingga anotasi dapat dikustomisasi dengan mudah.

--

Makalah Penelitian

1. Infinite Photorealistic Worlds Using Procedural Generation

   • Dipresentasikan di IEEE/CVF Conference on Computer Vision and Pattern Recognition (CVPR) 2023
   • Makalah yang membahas kemungkinan tak terbatas dari pembuatan 3D prosedural.

2. Infinigen Indoors: Photorealistic Indoor Scenes using Procedural Generation

   • Akan dipresentasikan di CVPR 2024
   • Penelitian mengenai pendekatan prosedural dalam menghasilkan adegan indoor.

[GN⁺]

Komentar Hacker News

• Proyek ini benar-benar luar biasa

  • Saya punya pertanyaan untuk para peneliti ML/AI: apakah ada paper ML/AI yang terkait, misalnya untuk melatih robot di lingkungan virtual
  • Saya penasaran dataset apa yang saat ini digunakan di bidang ML/AI untuk melatih robot

• Adegan dalam ruangan sudah sangat meyakinkan, tetapi adegan luar ruangan sangat kurang. Ini tertinggal dibandingkan teknologi terbaru

• Menarik bahwa daftar penulis mencakup beberapa universitas ternama di Tiongkok. Saya bertanya-tanya apakah itu berarti melanggar aturan pembatasan chip/ekspor

• Bertanya-tanya apakah proyek ini pernah diposting sebelumnya. Keren, tapi sepertinya sudah ada sejak beberapa tahun lalu. Ingin tahu apakah ada pembaruan

• Tautan postingan sebelumnya: https://news.ycombinator.com/item?id=36373494

• Di README tidak jelas. Bertanya-tanya apakah maksudnya adalah bisa menghasilkan variasi tak terbatas, atau menghasilkan dunia yang tak terbatas

• Penjelasan meta tag perlu diperbarui dan saat dibagikan konten placeholder ditampilkan

• Fakta bahwa ini mungkin terjadi seolah mengatakan sesuatu tentang semesta: bahwa lingkungan tidak memiliki sebanyak informasi sebanyak yang kita pikirkan

  • Ini juga dapat menjelaskan mengapa otak hewan yang kecil begitu efektif dalam memodelkan dan menjalankan dunia

• Intro yang mirip Matrix sama sekali tidak halus