- Pada 2016, pemerintah Inggris meminta Ordnance Survey (OS) menguji apakah basis data alamat nasional bisa dibuat tanpa Postcode Address File (PAF) milik Royal Mail, dan dokumen yang dirilis melalui permintaan kebebasan informasi menunjukkan bahwa membangun alternatif secara mandiri sulit menjadi pilihan yang realistis
- PAF adalah dataset inti untuk alamat pos fisik di Inggris, tetapi setelah privatisasi Royal Mail pada 2013, hak kepemilikan dan pengelolaannya juga berpindah ke sektor swasta, sehingga untuk digunakan di situs web atau aplikasi bisa memerlukan biaya lisensi tahunan lebih dari £6000
- OS merekonstruksi PAF menggunakan National Address Gazetteer (NAG) dan OS MasterMap, tetapi akurasinya dibanding AddressBase hanya mencapai 90,8%, menghasilkan 2,9 juta alamat yang salah dan 4,2 juta entri yang hilang atau keliru
- Kualitasnya goyah di lokasi dengan struktur alamat majemuk seperti blok apartemen, pusat perbelanjaan, bandara, rumah yang hanya punya nama, atau alamat di jalan masuk privat bersama, dan OS menilai 4,2 juta alamat bermasalah itu perlu diverifikasi secara manual
- Untuk membuat ulang data alamat dengan kualitas setara tanpa PAF akan memakan waktu lima setengah tahun dan hasilnya pun lebih buruk, sementara postcode itu sendiri juga dimiliki Royal Mail, sehingga pilihan realistis untuk data alamat terbuka lebih dekat pada mengambil kembali PAF dan membukanya ke publik
Mengapa PAF adalah dataset nasional
- Postcode Address File (PAF) adalah dataset inti yang memuat semua alamat pos fisik di Inggris
- Ini bukan data pribadi, melainkan basis data alamat, dan digunakan untuk fitur seperti pelengkapan alamat otomatis di halaman checkout toko online hanya dengan memasukkan postcode
- Peneliti dan pengembang perlu mengakses data alamat yang akurat untuk membangun alat, layanan, dan platform
- Saat ini PAF harus dilisensikan dari Royal Mail, dan untuk menggunakan data alamat di dalam situs web atau aplikasi biayanya bisa lebih dari £6000 per tahun
- Struktur biaya ini menjadi hambatan masuk bagi pengembang individu dan perusahaan kecil, sekaligus menghambat pertumbuhan ekonomi
Privatisasi 2013 dan upaya pemerintah pada 2016
- Saat Royal Mail diprivatisasi pada 2013, bukan hanya tanggung jawab pengiriman surat yang berpindah ke sektor swasta, tetapi juga kepemilikan dan pengelolaan PAF
- Dalam anggaran terakhir George Osborne pada 2016, pemerintah mengalokasikan £5m untuk mengembangkan opsi “register alamat otoritatif yang terbuka dan bebas digunakan”
- Dokumen anggaran saat itu menilai bahwa penggunaan data alamat yang lebih presisi, lebih luas, dan lebih sering diperbarui dapat membuka peluang inovasi
- Delapan tahun kemudian, PAF masih tetap berada di balik kepemilikan swasta dan hambatan biaya yang tinggi
- Hasil riset yang diungkap melalui permintaan kebebasan informasi menunjukkan bahwa pemerintah meminta OS menilai apakah PAF bisa direkonstruksi tanpa kekayaan intelektual milik Royal Mail
Cara OS membuat basis data alamat tanpa PAF
- OS memulai dari National Address Gazetteer (NAG), salah satu sumber yang juga dijadikan acuan Royal Mail saat menyusun PAF
- NAG tersusun dari data yang disediakan pemerintah daerah, kementerian, dan Ordnance Survey
- Ketika bangunan baru muncul, dewan lokal mengirimkan perubahan tersebut ke NAG
- Tidak seperti PAF, NAG tidak hanya memuat alamat bangunan tetapi juga infrastruktur utilitas seperti gardu listrik, halte bus, taman, dan lainnya
- Karena diperbarui oleh banyak organisasi dengan cara berbeda-beda, NAG tidak distandardisasi seperti PAF dan datanya berantakan
- OS menerapkan algoritme untuk membedakan alamat bangunan yang berguna dari fasilitas jalanan lainnya di dalam NAG
- Dalam proses ini OS membandingkan NAG dengan data peta grafisnya, Master Map
- Dengan menganalisis vektor dan bentuk geometri, OS mencoba menentukan apakah entri NAG adalah bangunan/alamat individual atau item seperti tiang telepon dan kotak pos
- Alamat yang tidak bisa diidentifikasi dengan pasti diperkirakan, diperbaiki oleh manusia dengan melihat peta, atau dalam beberapa kasus diperiksa langsung di lapangan
- Dari hasil pilot, OS membuat lebih dari 21 juta rekaman alamat lengkap dan 10 juta rekaman yang sebagian lengkap, sehingga dari sisi skala hasilnya mendekati PAF
Keterbatasan yang terlihat dari evaluasi akurasi
- OS menilai kualitas basis data baru itu dengan membandingkannya dengan AddressBase
- AddressBase adalah basis data alamat terpisah yang dimiliki OS dan dibuat menggunakan sumber yang berbeda dari NAG
- Perbedaan pentingnya adalah bahwa AddressBase juga membayar Royal Mail dan memasukkan data lisensi PAF
- Jika dibandingkan dengan AddressBase, dataset baru itu hanya mencapai akurasi 90,8%
- Ini berarti ada 2,9 juta alamat yang salah
- Alamat yang tidak ada atau masuk secara keliru di dataset baru mencapai 4,2 juta
- Kasus sederhana seperti rumah tunggal, di mana satu bangunan hanya terkait dengan satu alamat, relatif lebih mudah direproduksi
- Menyaring item yang tidak diperlukan seperti infrastruktur utilitas juga relatif sederhana
- Begitu struktur alamat menjadi sedikit lebih rumit, jumlah kesalahan meningkat
- Saat satu bangunan memiliki banyak alamat, seperti blok apartemen
- Saat di peta tampak seperti satu bangunan atau satu alamat, tetapi sebenarnya berisi ratusan alamat toko dan bisnis, seperti pusat perbelanjaan besar atau bandara
- Rumah yang diakses dari jalan masuk privat bersama
- Rumah yang hanya punya nama tanpa nomor
Koreksi manual dan masalah waktu
- OS menyimpulkan bahwa agar basis data tanpa PAF benar-benar berguna, 4,2 juta alamat bermasalah harus diverifikasi secara manual
- Tanpa proses ini, lebih dari 1 dari 10 alamat akan hilang atau salah, yang akan sangat merusak keandalan produk
- Organisasi seperti layanan darurat, yang sangat bergantung pada akurasi, bisa terdampak sangat besar oleh masalah kualitas semacam ini
- Bahkan jika pemerintah terus mendorong basis data baru tanpa PAF, butuh lima setengah tahun untuk membawanya ke tingkat yang layak digunakan secara praktis
- Biayanya disensor dalam respons permintaan kebebasan informasi dan tidak dipublikasikan
Cakupan pendekatan yang sempit
- Studi ini tidak cukup meninjau peluang proaktif seperti kreativitas dan inovasi yang bisa muncul jika PAF dibuka
- OS tidak memasukkan data alamat pihak ketiga ke dalam dataset baru tanpa PAF tersebut
- Salah satu alternatif yang mungkin adalah membeli dan menggabungkan jutaan alamat dari perusahaan seperti Experian
- Pemerintah juga mungkin bisa mengumpulkan alamat yang dikirim saat perpanjangan SIM atau pelaporan pajak HMRC lalu memasukkannya ke dataset alamat baru
- Kualitas data alamat tidak hanya ditentukan oleh kelengkapan, tetapi juga oleh frekuensi pembaruan, kecepatan perbaikan kesalahan, dan akurasi kategori alamat tertentu
Mengapa membuka PAF adalah kesimpulan yang paling realistis
- Hasil studi menunjukkan bahwa mereproduksi PAF tanpa menggunakan data Royal Mail adalah hal yang sangat sulit
- Rekonstruksi tanpa PAF mahal, memakan waktu lama, dan secara keseluruhan menghasilkan produk yang lebih buruk
- Postcode dimiliki oleh Royal Mail sehingga tidak bisa dimasukkan ke dataset baru, dan ini membuat data tersebut tidak berguna untuk banyak potensi kasus penggunaan
- Untuk mendapatkan manfaat data alamat terbuka, pemerintah harus mengambil kembali kendali atas dataset nasional inti ini dari Royal Mail
- Membuka Postcode Address File sebagai open data tetap menjadi jalur yang realistis untuk pertumbuhan dan inovasi
1 komentar
Komentar Hacker News
Di seberang Selat, pemerintah Prancis membuat BAN (Base Adresse Nationale, basis data alamat nasional), yang berisi alamat pos terperinci di Prancis beserta koordinat akuratnya: https://adresse.data.gouv.fr/base-adresse-nationale
Di atas basis data ini, mereka menyediakan antarmuka pencarian, antarmuka bagi pemerintah daerah untuk menjaga data tetap mutakhir, serta API gratis untuk pencarian alamat dan geocoding/reverse geocoding (https://adresse.data.gouv.fr/api-doc/adresse); datanya dapat diunduh dengan lisensi terbuka
Memasukkan data ke BAN diwajibkan oleh hukum, sehingga setiap pemerintah daerah harus membuat dan mengunggah Base Adresse Locale
Data sumbernya berasal dari beberapa sumber, termasuk La Poste, padanan Royal Mail di Prancis, dan OpenStreetMap
Masalahnya, nomor itu merujuk pada setidaknya 7 struktur, dan 5 di antaranya adalah gedung apartemen
Masing-masing dari 5 gedung itu terbagi menjadi beberapa tangga dengan pintu masuk terpisah, tanpa koridor penghubung, sehingga pada praktiknya berfungsi seperti gedung terpisah
Gedung saya memiliki 8 lantai dengan 2 unit per lantai, tetapi tidak ada nomor atau huruf pintu, jadi kepada pengunjung saya harus menjelaskan “lantai N, pintu kanan”; sebelum saya menempelkan nama di kotak surat lantai dasar, saya bahkan tidak bisa menerima surat
Sepengetahuan saya, informasi seperti ini tidak ada di BAN
Selain itu, di OpenStreetMap koordinat nomor jalan dari BAN menunjuk ke pulau jalan di tengah jalan yang menghadap akses masuk properti pribadi, padahal pintu masuk sebenarnya tidak hanya satu
Menambahkan pada balasan di bawah, yang dipersoalkan bukan sistem koordinat itu sendiri, melainkan asumsi tentang bagaimana koordinat tersebut dihitung
Satu perusahaan utilitas yang saya tahu masih terikat pada solusi pemodelan jaringan kustom yang resmi dihentikan pada 2014, dan karena alat impor alamat lamanya rusak, 3 karyawan tetap secara manual membuat dan menghapus alamat
Seperti yang disorot artikel itu, ini adalah kesalahan yang luar biasa bodoh saat privatisasi Royal Mail. Pada saat itu hal ini bisa ditangani dengan sangat mudah, tetapi sekarang menjadi jauh lebih sulit
Sekalipun pemerintah sekarang ingin melakukannya, mereka tidak bisa begitu saja meloloskan undang-undang yang menyatakan “PAF sekarang gratis” tanpa memberi kompensasi ratusan juta pound kepada Royal Mail
Ada juga biaya tersendiri untuk pemeliharaan data, dan pada masa pemotongan anggaran ini menjadi usulan yang sulit diyakinkan
Misalnya, jika pemilik properti tidak melaporkan konversi menjadi rumah dengan banyak penghuni karena berbagai alasan, penghuni bisa mengalami masalah dalam menerima surat
Jika ada masalah alamat, pertama-tama harus mengecek ke dewan lokal, jadi ini juga bagian yang cukup cocok dengan sentralisasi
Pemerintah sudah menghabiskan 5 juta pound hanya untuk studi yang menyimpulkan bahwa merekonstruksi PAF itu mustahil, jadi ratusan juta pound malah terdengar seperti transaksi yang cukup baik
Kesimpulan risetnya adalah bahwa membuat basis data yang akurat itu benar-benar sulit. OS menyimpulkan bahwa untuk membuat basis data tanpa PAF menjadi dataset yang benar-benar layak pakai, 4,2 juta alamat yang salah harus diperiksa secara manual
Kunci keberhasilan Royal Mail dengan PAF, dan alasan hanya Royal Mail yang bisa memelihara PAF, adalah karena staf Royal Mail berjalan kaki dan berkendara ke semua titik pengantaran itu 6 hari setiap minggu
Ini bisa dibandingkan dengan kasus ketika kontributor OpenStreetMap mengajukan permintaan kebebasan informasi kepada Royal Mail tentang lokasi kotak pos, tetapi akhirnya ditolak dengan alasan informasi tersebut hanya ditangani oleh kantor sortir setempat
Ini adalah pertarungan lama. Orang yang ingat cukup jauh mungkin masih ingat konflik 15 tahun lalu ketika sekelompok kecil aktivis pengembang membuat ernestmarples.com, yang menyediakan akses gratis ke data kode pos
Nama situs itu diambil dari nama penemu sistem kode pos modern Inggris, dan tentu saja segera ditutup setelah Royal Mail mengancam tindakan hukum
https://www.theguardian.com/technology/2009/oct/05/ernest-ma...
https://blog.okfn.org/2009/10/05/ernest-marples-uk-postcode-...
Jadi bagi orang yang hanya ingin tahu bahwa AB10 1JL kira-kira merujuk ke area di sekitar 57.14677,-2.09873, datanya sudah ada
PAF adalah sumber data yang lebih rinci, dan seperti yang terlihat di https://www.royalmail.com/find-a-postcode, ia memberi tahu alamat-alamat spesifik apa saja yang termasuk dalam AB10 1JL, seperti 102-104 Union Street, Aberdeen, 82 Union Street, Timpson Shoe Repairs Ltd, Smart Mobile, dan sebagainya
PAF berguna untuk menyediakan opsi pengisian alamat cepat di situs web atau untuk memvalidasi data alamat
Kalau hanya ingin mengubah kode pos menjadi lokasi, informasi itu sudah terbuka
Solusi sederhana di sini adalah pemerintah menekan Royal Mail
Jika tidak menyerahkan berkas kode pos secara gratis, pemerintah bisa mengatakan akan membuat sistem nomor baru, mengirim kartu alamat berisi nomor baru ke setiap rumah bersama tagihan pajak daerah berikutnya, dan menjadikan kode pos sebagai peninggalan masa lalu
Sistem nomor baru itu cukup dibuat unik untuk setiap rumah dan menyertakan digit pemeriksa, sehingga hanya dengan nomor tersebut perusahaan logistik pihak ketiga seperti Amazon pun dapat menggunakannya untuk pengantaran
Saat ingin mencari kode pos, saya mencarinya di peta permohonan izin perencanaan
Saya belum memeriksa Inggris, tetapi di Skotlandia itu jelas demikian; misalnya, entri acak untuk St Mungo's Cathedral di Glasgow ada di sini: https://publicaccess.glasgow.gov.uk/online-applications/case...
Misalnya pemecahan bidang tanah, penggabungan bidang tanah, dua rumah di atas bidang tanah yang sama, gedung apartemen, rumah yang dibongkar lalu diganti apartemen, dan seterusnya
Saya bekerja di manufaktur, dan ini sangat mirip dengan persoalan nomor komponen; sama sekali bukan masalah sepele, dan perusahaan tempat saya bekerja juga pernah menganggapnya sepele lalu menanganinya dengan keliru
Sebagai perbandingan, di Belanda semua data kode pos adalah data terbuka, dan juga mencakup kontur bangunan yang rinci serta hampir semua informasi terkait
Sebagian besar dataset dapat dilihat di https://app.pdok.nl/viewer
Contoh yang sering saya alami adalah Google Maps menemukan lokasi alamat saya (kota, nama jalan, nomor rumah), lalu mencoba mengubah balik lokasi itu menjadi kode pos saya
Kedengarannya masuk akal, tetapi gagal begitu Anda tahu bahwa poligon kode pos bisa saling tumpang tindih
Di gedung tempat saya tinggal, kira-kira setiap lantai memiliki kode pos tersendiri, sehingga ketika saya memasukkan alamat ke situs web yang memakai Google API, kode pos saya akan “dibantu” diisi otomatis atau “dikoreksi” dari 1234AB menjadi 1234AZ
Karena semua kode pos berbagi koordinat yang sama, pada dasarnya sistem memilih salah satunya secara acak
Kombinasi kode pos dan nomor rumah seharusnya mengidentifikasi kotak surat secara unik, jadi ini situasi yang sangat buruk; hanya kebetulan saja nomor rumah tidak dipakai ulang dalam kumpulan kode pos yang digunakan di gedung saya
Inggris setidaknya masih bisa berdalih bahwa kode pos adalah sistem berusia 60 tahun, jadi wajar ada sisa-sisa legacy
Sebaliknya, Irlandia, saat memperkenalkan Éircode yang usianya belum sampai 10 tahun, memilih format buram yang membuat akses ke basis data pusat harus dibayar dan apa pun di atas pencarian dalam jumlah kecil juga berbayar
Karena hanya menangani rumah, Anda juga tidak bisa memberikan eircode untuk taman atau jalur pejalan kaki
Persis seperti sesuatu yang akan dirancang pemerintah modern
Perusahaan seperti IBM-lah yang terasa lebih mungkin merancang kekacauan total semacam itu dalam proyek besar
Yang kurang adalah alamat-alamat sebenarnya yang termasuk di dalam kode pos tersebut
Bagi orang di luar Inggris, kode pos Inggris, misalnya, mempersempit lokasi bukan ke kota atau wilayah, melainkan kira-kira hingga 1–15 bangunan
Dalam praktiknya, biasanya lebih mirip kumpulan alamat yang berdekatan, dan sering kali Anda perlu mengetahui area tersebut, jadi cukup menarik
[0] https://club.ministryoftesting.com/t/what-are-fun-postcodes-...
Sebagian besar jalan kami memiliki satu kode pos. Dulu ini jalan dengan rumah-rumah tunggal, jadi mungkin sekitar 30–40 rumah tangga, tetapi karena pinggiran kota makin padat, sebagian rumah dipecah menjadi apartemen, dan satu rumah tunggal besar bisa menjadi enam rumah kecil
Sebagian dibeli lalu dirobohkan, dan dari luar tidak mencolok, tetapi berubah menjadi bangunan yang sama sekali berbeda dari sebelumnya
Tempat saya tinggal adalah blok hunian khusus 4 lantai, tetapi dirancang agar dari luar tampak seperti rumah besar; lantai dasarnya lebih rendah dari jalan, dan di bagian depan lantai paling atas hanya ada jendela yang tampak seperti konversi loteng
Meski begitu, semuanya tetap satu kode pos, jadi mungkin berbagi kode yang sama dengan lebih dari 100 rumah tangga
Pengodean ulang akan membingungkan dan kurang bernilai, jadi umumnya tidak dilakukan
Dalam pengantaran pos sebenarnya, kode pos hanyalah unsur alamat yang mudah dibaca manusia untuk kenyamanan; mesin, kadang dengan bantuan manusia, mengubah alamat sembarang menjadi kode tujuan unik lalu mencetaknya sebagai barcode pada kiriman
Jadi bagi Royal Mail, tidak terlalu menjadi masalah jika kode pos tidak sedeskriptif 50 tahun lalu
Kalau Anda memeriksa surat yang diterima selama beberapa hari, dalam proses penyortiran ada dua barcode oranye fluoresen yang dicetak dengan inkjet
Kode di atas lebih mirip ID unik sementara, diterbitkan untuk semua kiriman dalam sistem penyortiran, lalu dimulai ulang ketika habis, berguna untuk debugging dan statistik
Kode di bawah dalam arti tertentu adalah penerus kode pos: sama untuk semua item yang dikirim ke alamat yang sama dan berbeda dari alamat lain
Dalam praktiknya, itu mengodekan Delivery Point yang ditangani PAF, yakni titik tempat staf Royal Mail mengantarkan surat: https://en.wikipedia.org/wiki/RM4SCC
Karena memakai kode pos “sebenarnya” semacam ini, Royal Mail juga bisa lebih mudah mengabulkan permintaan kode pos “gengsi” yang tidak realistis
Jika orang-orang kaya di Dirt Town menginginkan kode pos Upper Niceton yang mewah di sebelahnya, Royal Mail bisa mengizinkannya, karena tim operasional sebenarnya bekerja dengan kode numerik murni sehingga rumah-rumah “Upper Niceton” itu tetap diproses sebagai lokasi aslinya, yaitu Dirt Town
Sepertinya di suatu tempat ada “kebohongan yang dipercayai programmer tentang alamat”
Sebagai seseorang yang pernah menjadi penyewa rumah baru di Inggris, yang penting bukan hanya filenya, tetapi juga jalur untuk menambal file tersebut
Selama hampir setahun saya harus memasukkan alamat secara manual, karena database kode pos, atau versi lama yang dimiliki pets.com, cameras.com, dan looroll.com, terus-menerus gagal mengejar kenyataan bungalow infill saya
Saya ini 8A, bukan 8 sialan. Terima kasih kepada ibu di rumah nomor 8 yang menerima paket saya selama bulan-bulan kelam itu
Ini mirip dengan tzdata. Ia bernilai bukan hanya karena mengumpulkan sejarah pengaturan jam geopolitik, tetapi juga karena diperbarui dengan cermat, tepat waktu, dan sesuai anggaran
Membebaskan PAF.v2024_08finalfinal_v3_final.doc itu bagus, tetapi siapa yang akan terus menjaganya tetap mutakhir
Ini bukan karena saya membencinya, melainkan pandangan realistis. Artikel aslinya tepat. Kita tidak bisa bersaing untuk mengalahkan, mereplikasi, atau membocorkan versi PAF yang cukup memadai; kita harus mengembalikan PAF beserta seluruh infrastrukturnya ke tangan publik secepat mungkin, dan juga siap menanggung biaya pembaruannya
Pada masa-masa yang kurang baik, 10 tahun lalu kami menerimanya dalam CD dari perusahaan biro kredit ternama
Setelah itu kami beralih ke pembaruan “otomatis” ke instalasi internal melalui software yang buruk dan penuh bug, tetapi software itu berhenti begitu saja kalau tidak diawasi sebentar, jadi bukan peningkatan besar
Sekarang kami membayar perusahaan lain yang sama sekali berbeda dan lebih baik untuk akses lewat web service
Kini saya kira kecepatan pembaruan sampai ke situs web setidaknya umumnya mengikuti siklus rilis PAF
Kalau belum berubah belakangan ini, PAF bukan dibuat langsung oleh Royal Mail, melainkan dialihdayakan ke perusahaan bernama AFD di Isle of Man
Satu-satunya keluhan saya terhadap layanan saat ini adalah biayanya kurang sepadan dengan nilainya. Total biaya kami rata-rata sekitar 30 pence per pencarian alamat, padahal dalam pekerjaan kami alamat-alamat itu kemungkinan besar hampir tidak pernah benar-benar digunakan
Eircode di Irlandia pada dasarnya juga memiliki struktur yang sama. Awalnya dibuat sebagai dataset privat yang berpemilik, dan sekarang untuk menggunakannya harus mendapatkan lisensi akses.
Eircode lebih baik daripada kode pos dalam arti ada satu untuk setiap bangunan/alamat/apartemen, tetapi karena tidak berurutan, bangunan yang bersebelahan pun bisa memiliki eircode yang sama sekali berbeda.
Tulisan tersebut menekankan kesulitan pada pusat perbelanjaan dan gedung apartemen, dan berdasarkan pengalaman saya mencoba memverifikasi Eircode-alamat dalam jumlah besar di sebuah proyek, ini jelas memang masalah.
Masalah yang lebih buruk adalah tidak ada cara untuk mengirim seseorang guna memastikannya. Sebab, eircode bukan seperti nomor rumah yang ditempel di suatu tempat.
Belum lagi masalah bahwa alamat Irlandia yang valid bisa saja tidak memiliki nomor sama sekali selain eircode, dan eircode itu sendiri adalah elemen tambahan nontradisional yang baru muncul belakangan.
HSE National Ambulance Service(NAS) National Emergency Operations Centres(NEOCs) memiliki paket GIS yang menafsirkan Eircode serta alamat tradisional dan sehari-hari menjadi bangunan nyata dan pintu masuk bangunan secara real time, dan itu cukup mengesankan.
Petunjuk arah dapat dikirim secara real time ke ambulans dan aset lain, sehingga sejak 2016 keterlambatan layanan klinis akibat kebingungan alamat jauh berkurang.
Jadi negara sebenarnya mampu melakukannya. Eircode adalah pilihan yang kita ambil sebagai sebuah negara, bukan sesuatu yang terpaksa karena keterbatasan.