Menjelajahi Rumah Sebelum Selesai Dibangun dalam Ukuran Nyata dengan Vision Pro

• Dengan mengubah denah rumah sebelum dibangun menjadi ruang 3D imersif berukuran nyata, Anda dapat meninjau desain sambil merasakan langsung ukuran kamar dan koridor, alur pergerakan, serta pemandangan yang terlihat dari pintu masuk
• Alur kerjanya dibuat dengan membangun lantai, dinding, dan plafon di Fusion 360, menempatkan material dan furnitur, lalu mengekspornya sebagai USDZ untuk dijelajahi di Vision Pro
• Model tempat tidur, meja, peralatan rumah tangga, dan mobil bisa didapat dari IKEA dan 3D Warehouse, tetapi untuk mengimpornya ke Fusion 360, glb atau USDZ harus dikonversi ke OBJ
• Prospector, yang dibuat dengan Claude dan Codex, mendukung perpindahan dengan controller, pelacakan medan, terbang, peralihan ke tampilan dunia nyata, gerak 6x lebih cepat, dan skybox, sehingga memungkinkan eksplorasi yang lebih bebas dibanding viewer USDZ bawaan
• Perubahan desain dapat diterapkan dengan mengubah model di Fusion 360 lalu mengekspornya kembali, dan ini bisa digunakan untuk memahami ruang sebelum selesai dibangun serta meminta pendapat pasangan atau teman

---

Sulitnya memahami nuansa ruang hanya dari denah

• Dalam proses membangun rumah pertama setelah tinggal di apartemen, ada begitu banyak keputusan yang harus diambil, seperti posisi dinding, yang nantinya sulit dikembalikan dengan mudah
• Dalam kondisi harga rumah yang mahal, setiap area harus dimanfaatkan secara efisien, tetapi hanya dari kotak-kotak hitam di denah PDF dan angka seperti 13×15 kaki, sulit untuk memahami nuansa ruang yang sebenarnya
  • Apakah koridor terasa sempit
  • Apa yang terlihat saat pertama kali masuk ke rumah
  • Sulit menilai seperti apa ukuran setiap ruangan akan terasa secara nyata
• Vision Pro, dengan layar beresolusi tinggi dan banyak sensor, dipilih sebagai perangkat untuk masuk langsung ke rumah virtual

Membuat model rumah dengan Fusion 360

• Di Fusion 360, yang dapat digunakan gratis oleh pengguna hobi, denah digambar dalam 2D, lalu dinding diekstrusi dan lantai, plafon, serta lubang pintu ditambahkan
• Karena bisa dimulai tanpa pemodelan yang rumit, ini cocok sebagai proyek pertama untuk mempelajari alat desain 3D
  • YouTube dan pertanyaan ke AI dapat digunakan sebagai bahan belajar
  • Jika sulit membuatnya sendiri, Anda bisa mencari pekerja di Fiverr yang dapat mengubah denah menjadi file 3D
• Ruang yang hanya berisi dinding dan plafon kosong mudah terlihat seperti gudang sehingga skalanya bisa salah dinilai; karena itu perlu menambahkan furnitur dan material sebagai acuan visual

Menambahkan kedalaman ruang dengan material

• Di Fusion 360, tombol A membuka panel Appearance, lalu material seperti kayu, batu, dan cat dapat di-drag-and-drop ke objek
• Ini dapat mengurangi kesan semua permukaan terlihat sebagai material monoton yang sama dan menambah kedalaman pada ruang; material kaca juga dapat diterapkan pada jendela

Memanfaatkan model furnitur IKEA

• Dengan menempatkan sofa, tempat tidur, meja, dan karpet, ukuran kamar serta kemungkinan tata letak furnitur dapat dinilai secara lebih realistis
• IKEA memiliki model 3D untuk banyak produk, tetapi sulit menemukan fitur untuk mengunduhnya langsung
  • Model dapat diunduh dengan skrip IKEA 3D Model Download Button untuk Tampermonkey
  • Tidak semua produk didukung, tetapi cukup banyak produk memiliki model 3D
• Karena file yang diunduh berformat glb, digunakan alat konversi GLB-to-OBJ agar dapat diimpor ke Fusion 360
• Material di folder yang sama dengan OBJ hasil konversi mungkin tidak terlihat di dalam Fusion 360, tetapi akan muncul dengan benar jika diekspor kembali dari Fusion

Mengambil peralatan rumah tangga dan mobil dari 3D Warehouse

• 3D Warehouse adalah komunitas tempat pengguna mengunggah model 3D gratis, dan di sana juga bisa ditemukan objek yang sulit didapat dari IKEA, seperti stand mixer, penanak nasi, dan mobil
• Mengimpor model ke SketchUp mudah, tetapi sulit digunakan langsung di Fusion 360, sehingga pratinjau 3D di iOS dimanfaatkan sebagai jalur alternatif
  • Membuka URL model di iOS dan melihatnya dalam 3D di lingkungan saat ini
  • Menekan tombol berbagi untuk mengambil file USDZ yang digunakan dalam pratinjau
  • Mengirimkannya ke Mac melalui AirDrop
• Karena Fusion 360 juga tidak lancar dalam mengimpor objek USDZ, model ditempatkan setelah melalui alat konversi USD-to-OBJ

Keterbatasan viewer USDZ bawaan

• Model yang sudah selesai dapat disimpan dengan fitur ekspor USDZ di Fusion 360, lalu dikirim ke Vision Pro melalui AirDrop
• Model dapat dibuka dan dijelajahi di aplikasi Files, tetapi jika bergerak melintasi seluruh rumah virtual dalam ukuran ruangan nyata, Anda bisa menabrak furnitur atau dinding di dunia nyata
• Untuk menjelajahi ruang virtual yang luas dengan aman dan bebas, diperlukan sarana pergerakan yang menggantikan berjalan secara fisik

Pembuatan Prospector dan fitur eksplorasinya

• Dengan menggunakan Claude dan Codex bersama-sama, viewer USDZ untuk Vision Pro bernama Prospector dibuat dalam setengah hari
• Alih-alih menghabiskan beberapa minggu untuk memolesnya, ini adalah contoh vibe coding yang dengan cepat mengimplementasikan fitur yang diperlukan untuk eksperimen pribadi
• Fitur eksplorasi yang tidak ada pada tampilan USDZ di aplikasi Files bawaan ditambahkan
  • Perpindahan dengan controller: Dapat bergerak dan memutar kamera seperti game 3D, sambil tetap menggunakan berjalan sungguhan dan gerakan kepala
  • Skybox: Menampilkan latar hutan sederhana alih-alih ruang nyata di luar jendela
  • Pelacakan medan: Jika D-pad kanan ditekan, pergerakan mengikuti naik-turun medan yang dibuat dari data survei
  • Peralihan ke tampilan dunia nyata: Dengan menempelkan ibu jari dan jari tengah sebentar, dunia virtual dapat dinyalakan atau dimatikan untuk memeriksa hambatan seperti meja di dunia nyata
  • Terbang: Dengan trigger, Anda dapat bergerak naik-turun untuk berpindah lantai, dan menekan bagian atas D-pad akan mengembalikan ke ketinggian permukaan tanah
  • Gerak cepat: Menekan D-pad kiri membuat pergerakan 6 kali lebih cepat untuk melintasi lahan yang luas
• Headset dapat diberikan kepada pasangan atau teman untuk meninjau desain bersama, dan perubahan diterapkan dengan mengeditnya di Fusion 360, mengekspor ulang, lalu menjalankannya kembali

Menjalankannya sendiri dari GitHub

• Kode sumber Prospector telah dipublikasikan di GitHub, tetapi masih perlu pekerjaan tambahan agar cukup rapi untuk diajukan ke App Store
• Prosedur menjalankannya adalah sebagai berikut
  • Mengimpor file USDZ ke proyek Xcode
  • Mengganti nama file USDZ di ImmersiveView.swift dengan nama file Anda sendiri
  • Jika perlu, mengganti skybox dengan latar dari Poly Haven
  • Memasangkan controller dengan Vision Pro dan menjalankan proyek di perangkat fisik
• Kodenya pada dasarnya ditulis oleh AI, dan implementasi saat ini masih kasar untuk eksperimen pribadi

Tinjauan desain rumah secara imersif

• Arsitek menampilkan calon rumah dalam bentuk walkthrough 3D dengan Revit; seperti Google Street View, Anda dapat mengklik titik untuk berpindah dan menyeret untuk melihat sekeliling
• Di Vision Pro, karena dapat melihat-lihat seolah berada di dalam ruang dan merasakan ukurannya, struktur rumah sudah terasa familier bahkan sebelum melihat walkthrough Revit kemudian
• Cara mengunjungi calon desain dalam 3D imersif dapat menjadi tahap inti dalam proses desain rumah di masa depan, dan sudah dapat diwujudkan saat ini jika memiliki hardware yang diperlukan

[GN⁺]

Komentar Hacker News

• Akan bagus jika menghitung elevasi dan azimut matahari menurut musim dan waktu untuk mensimulasikan cahaya yang masuk ke dalam rumah. Dengan begitu bisa dicek apakah ruangan tertentu akan terlalu panas karena sinar matahari langsung di musim panas, memaksimalkan sinar matahari musim dingin, dan juga menambah peluang untuk kebetulan menikmati matahari terbit atau terbenam

  • Saya benar-benar menerapkannya untuk melihat matahari terbenam, dan ada beberapa situs web hebat yang menunjukkan arah matahari terbit dan terbenam pada tanggal tertentu sepanjang tahun

• Saya menjalankan perusahaan desain dan konstruksi di Hamptons, AS, dan memakai teknologi ini setiap hari. Semua proyek dimulai dengan pendekatan 3D-first, membuat desain konseptual di Rhino3D atau Revit, merendernya di Enscape, lalu mengirimkannya ke Quest 3
  Setelah sudut pandang disetel sesuai tinggi badan asli klien dan mereka diajak berjalan langsung di rumah barunya, mereka bisa memahami skala dan proporsi ruangan, tinggi plafon, hingga detail kecil secara intuitif, dan selama masih masuk akal model bisa diubah secara real-time untuk mendapat umpan balik seketika. Saya sudah memakainya bertahun-tahun, dan meski mengejutkan adopsinya masih lambat, untuk saat ini itu justru memberi keunggulan kompetitif

  • Saat renovasi rumah sekitar 2021, saya memakai kombinasi SketchUp·Enscape·Quest 2, dan itu sangat mengurangi seberapa sering istri saya ingin memindahkan dinding lagi setelah pekerjaan selesai
  • Melihat cerita ini hampir membuat saya berhenti kerja dan kembali ke arsitektur, yang memang passion awal saya. Saat ini saya berencana mendesain rumah di Blender lalu membawanya ke Unreal Engine untuk dijelajahi dengan berjalan kaki; jika pengetahuan full-stack untuk mewujudkan itu masih langka, jalur karier ini tampak seseru yang saya bayangkan
  • Saya penasaran apakah nilai VR/AR terutama ada pada menyampaikan niat desain kepada klien yang tidak terbiasa dengan gambar 2D tradisional, atau para perancang juga memakainya langsung dalam proses pengembangan
  • Saya penasaran apakah orang benar-benar menyiapkan bangunan atau ruang kosong sebesar rumah kustom biasa. Biasanya ukurannya cukup besar, jadi saya juga ingin tahu apakah pratinjau dibagi per zona
  • Saya ragu Apple akan terus menginvestasikan miliaran dolar pada perangkat enterprise niche yang hanya terjual ribuan unit per bulan. Vision Pro, selain SoC, adalah perangkat keras khusus dan juga tidak berbagi biaya R&D maupun produksi dengan lini produk lain seperti Mac Pro
    Selama 2,5 tahun terakhir sudah terlihat tidak ada pasar massal, dan bahkan Meta tampaknya beralih ke perangkat berbentuk kacamata setelah menghabiskan lebih dari 100 miliar dolar untuk Quest dan menjual sekitar 30 juta unit. Selain beberapa kasus penggunaan enterprise yang terbatas, seluruh kategori produk ini terlihat gagal

• Saat mendesain rumah hampir 10 tahun lalu, saya memakai HTC Vive dan https://irisvr.com/prospect/. Saat memakai headset, dalam 1 detik saya bisa tahu apakah proporsi ruang sudah tepat atau perlu penyesuaian halus, jadi sangat berguna, dan beberapa rumah yang benar-benar selesai dibangun pun terasa persis seperti simulasi yang sudah saya kenal

  • Menariknya, penulis juga menamai alatnya Prospector. Rasanya mungkin ini hasil LLM yang menyarankan nama mirip produk yang sudah ada, Prospect, meski itu mungkin terlalu spekulatif

• Vision Pro sudah merupakan perangkat keras terbaik, tetapi butuh sistem operasi yang praktis yang melampaui kiosk media. Bukan hanya menampilkan satu layar Mac, tetapi harus bisa menata semua jendela Mac dan jendela konten 3D secara alami di dalam ruang
  Jika pemanfaatan ruang visual dan ergonomi fisik ditingkatkan serta hambatan untuk berkembang ke fungsi praktis 3D dihilangkan, ini bisa menciptakan pengalaman seperti NeXT yang berkembang di atas macOS/Mac, bukan sekadar iOS kasir lainnya

• Christian adalah pengembang hebat yang membuat Apollo, pengalaman menggunakan Reddit terbaik sepanjang masa. Setelah Apollo diblokir dan hilang, saya hampir tidak pernah lagi memakai Reddit kecuali sesekali lewat pencarian Kagi, dan aplikasinya begitu bagus sampai bisa membuat pengguna Android garis keras membeli iPhone hanya demi aplikasi ini

  • Saat saya bilang akan berhenti dari Reddit setelah Apollo ditutup, saya sendiri ragu apakah itu benar-benar mungkin, tetapi ternyata sama sekali tidak terasa seperti pengorbanan. Aplikasi resminya sangat buruk sampai menjelajah jadi tidak menyenangkan, dan web mobile juga memaksa pemasangan aplikasi, jadi sekarang saya hampir tidak pernah membuka postingan yang muncul di hasil pencarian
  • Saya sempat mencoba sideload Apollo lewat AltStore, tetapi terus mengalami crash dan gagal berjalan, jadi sulit mempertahankannya secara stabil
  • Syukurlah Voyager untuk Lemmy menjadi penerus spiritual Apollo. Antarmuka Reddit yang baru mengerikan, dan sulit dipercaya mereka tidak mengakuisisi Apollo, tetapi berkat itu saya jadi berhenti dari Reddit
  • Apollo Reborn yang memakai API key sendiri masih bisa digunakan. Di Android saya memakai aplikasi Reddit yang dimodifikasi, dan di Firefox saya memakai old.reddit; Reddit masih terlalu berharga untuk ditinggalkan sepenuhnya
    Saat mencari rekomendasi yang spesifik, saya kadang juga meminta LLM merujuk ke Reddit
  • Setelah Apollo ditutup, penggunaan Reddit saya turun menjadi kurang dari sepersepuluh, dan kalau dipikir-pikir mungkin itu justru hal yang baik

• Setelah rumah selesai dibangun, mungkin akan lebih berguna untuk melacak jalur kabel dan pipa di dalam dinding. Model Revit bisa berisi informasi nyata atau setidaknya rencana, dan itu terutama membantu di rumah tua tempat pemasangan kabel Ethernet sering harus dilakukan secara improvisasi
  Meski begitu, dalam praktiknya saya lebih sering memakainya untuk menikmati media 4K HDR. Harapan bahwa ini akan menjadi perangkat praktis serbaguna memang belum terpenuhi, tetapi pemutaran medianya begitu luar biasa sehingga masih cukup bisa diterima

• Sebagian besar fitur yang ditampilkan di sini tampaknya juga bisa dibuat dengan ARKit di iPhone. Headset memang lebih bagus, tetapi sulit mengatakan bahwa itu lebih baik senilai 3.500 dolar dibanding melihatnya lewat layar ponsel
  Saat pindahan, saya memindai apartemen dengan iPhone untuk membuat model 3D dan memakainya untuk pengukuran serta penataan furnitur, lalu sebelum pergi saya juga memindai rumah lama agar bisa masuk lagi secara virtual kapan saja. Finder dan Pratinjau bahkan mendukung tampilan AR untuk model 3D secara bawaan

  • Saya penasaran dengan seluruh alur kerja, aplikasi pemindaian yang dipakai, format model 3D yang dihasilkan, dan alat perencanaan ruangnya. Saya bisa membuat model yang lumayan bagus dengan 3d scanner app, tetapi karena berbasis LiDAR presisinya kurang, dan sulit mencocokkan model yang akumulasi error-nya berbeda dari denah asli
    Dalam penataan furnitur, selisih 1 inci pun penting, jadi kalau dinding 100 inci jadi 99 atau 101 inci itu merepotkan. Saya ingin tahu cara membuat model dengan ukuran seakurat mungkin dan menempatkan model 3D furnitur di dalamnya
  • Saya pernah memakai beberapa aplikasi AR mirip yang dulu disediakan IKEA untuk mengecek apakah produk cocok di ruang nyata, dan juga ikut proyek VR untuk interior mobil. Di AR ponsel, skala dan kesan ruang masih harus ditebak, sedangkan di VR itu bisa benar-benar dirasakan, dan reaksi orang yang melepas headset lalu kaget karena kembali ke ruangan kecil sangat berkesan
    Saya ingin memindai ruang untuk kenang-kenangan, tetapi sulit menemukan aplikasi terkait yang mudah dicari dan digunakan
  • Kalau Meta Quest 2 bekas, ini bisa dilakukan dengan sekitar 100 dolar
  • Untuk proyek hobi dengan anggaran terbatas, pendekatan iPhone memang cocok, tetapi jika dipakai dalam proposal penjualan, 3.500 dolar bisa menjadi investasi untuk meningkatkan penjualan
  • ARKit adalah hal pertama yang terlintas, dan ukuran pasar yang bisa dijangkau juga jauh lebih besar

• Membuat dunia 3D lalu berjalan di dalamnya tampak seperti fungsi standar semua headset VR, jadi saya tidak tahu apa yang istimewa

  • Fungsinya sendiri dan aplikasi nyata yang memanfaatkan fungsi itu adalah hal yang berbeda
  • Sekitar 15 tahun lalu pun saya pernah mengerjakan hackathon dengan konsep ini memakai Oculus Rift DK1
  • Saat diterapkan ke renovasi rumah, perbedaan besarnya bukan sekadar VR, melainkan penyelarasan AR. Bisa merasakan langsung di mana perubahan virtual bertemu dengan ruang nyata itu sangat besar nilainya
  • Yang satu adalah mainan, yang lain adalah alat untuk menangkap kesalahan sebelum menghabiskan ratusan ribu dolar
  • Pelacakan posisi skala ruangan yang dibahas di tulisan ini baru tersedia di headset konsumen pertama pada 2016. Pada 1980-an hingga 2000-an, kebanyakan hanya bisa melacak kepala, dan pelacakan posisi waktu nyata memerlukan peralatan yang jauh lebih mahal serta batasan ruang yang ketat
    Untuk memetakan ruang yang luas, diperlukan pelacakan posisi berlatensi rendah dan pelacakan acuan internal, dan untuk menjelajahi beberapa ruangan ini praktis wajib. Dunia 3D juga harus menyesuaikan anggaran komputasi grafis headset yang lebih dari dua kali lipat, jadi ekspor langsung ke USDZ dari Fusion lalu merendernya menunjukkan performa AVP. Menggabungkan video dunia nyata dengan 3D serta menerapkan pencahayaan, pantulan, dan transparansi juga merupakan pekerjaan yang dulu begitu sulit sampai membutuhkan beberapa perangkat besar dan mahal

• Saya memindai gym panjat tebing lokal lalu memetakan video panjat ke dindingnya: https://kmcheung12.github.io/climb-preview/w/a6ece004
  Aplikasi 3D sangat kurang dimanfaatkan, dan ada ranah interaksi yang tidak bisa diberikan oleh web berbasis teks

  • Memang kurang dimanfaatkan, tetapi saya ragu apakah itu memberi nilai yang cukup untuk membenarkan biaya perluasan penggunaannya

• Dengan headset VR terbaru, ini bisa dilakukan dengan apa saja, tetapi tetap penggunaan yang cukup keren

  • Dari reaksinya saja saya sempat mengira hasilnya akan sangat premium dan halus, tetapi ternyata sebenarnya berada pada level yang juga bisa dicapai dengan headset yang harganya sepersepuluhnya
  • Saya berharap ada aplikasi yang bekerja seperti pengukur interior laser versi VR. Saat Anda mengangkat kayu, VR akan menunjukkan lokasi pemasangannya, dan pekerja lain memasangnya ke tiang sambil memakai headset dengan presisi di bawah 1 mm
  • Dari judul dan jumlah upvote, saya kira saya telah menemukan use case baru yang membenarkan harga ~~3.500 dolar~~ 3.700 dolar, tetapi ternyata sangat mengecewakan
  • Bahkan Google Cardboard pun bisa