1 poin oleh GN⁺ 2024-12-22 | 1 komentar | Bagikan ke WhatsApp
  • Pengenalan S2

    • S2 adalah solusi penyimpanan data streaming untuk era cloud, untuk memperkuat inti sistem data.
    • Berupaya menerapkan pengalaman serverless dari penyimpanan objek tradisional ke data streaming.
    • S2 menganggap stream sebagai elemen dasar penyimpanan cloud.
  • Jika Stream Lebih Diutamakan daripada Object?

    • Penyimpanan objek cocok untuk data yang berhenti/diam, sementara penyimpanan stream dirancang untuk memenuhi kebutuhan data yang bergerak.
    • S2 memproses data per record, dan meskipun ada banyak penulis yang bekerja secara bersamaan, semua record tetap diproses secara berurutan.
    • Berbeda dari S3, S2 mampu melacak stream secara real-time.
  • Serverless – Berapa Biayanya?

    • S2 dibangun di atas skalabilitas dan ketahanan tak terbatas dari penyimpanan objek.
    • Pengguna dapat menyeimbangkan trade-off antara latensi dan biaya untuk tiap stream.
    • Menyediakan dua kelas penyimpanan, Standard dan Express, yang masing-masing didasarkan pada AWS S3 Standard dan S3 Express One Zone.
    • Kelas Express menyediakan latensi yang mirip dengan sistem streaming cloud berbasis disk.
  • Langkah Berikutnya S2

    • S2 dibangun di atas infrastruktur cloud yang sudah teruji dan divalidasi, dengan basis kode Rust.
    • Saat ini menyediakan gRPC API, Rust SDK, dan CLI, serta sedang mengembangkan REST API.
    • Rencana ke depan termasuk kompatibilitas protokol Kafka, multi-region, dan target latensi di bawah 5 milidetik.
    • S2 cocok untuk pengguna yang menginginkan streaming cloud dengan jumlah stream dan throughput tanpa batas.

1 komentar

 
GN⁺ 2024-12-22
Komentar Hacker News
  • Menamakan produknya S2 dan memperkenalkannya sebagai teknologi yang menyempurnakan AWS S3 bisa memicu masalah merek dagang dengan Amazon.
  • API-nya indah dan saya ingin memakainya untuk proyek, tetapi dalam bentuk saat ini sepertinya tidak akan bertahan lama. Jika berhasil, kemungkinan besar AWS akan membuat versi yang lebih baik.
    • Akan lebih bermakna jika dirilis sebagai produk end-user seperti Papertrail.
    • Jika menambahkan backend yang kompatibel dengan S3, ini bisa menjadi produk cloud-agnostic yang bagus.
  • Sepertinya mirip WarpStream tetapi menyediakan API level rendah alih-alih kompatibilitas Kafka.
    • Jika diadopsi dalam jangka panjang, API streaming setara S3 akan sangat berharga.
  • Ingin tahu mengapa biaya transfer internet dipungut sebesar $0.05/GB sementara AWS $0.09/GB. Meragukan apakah kita bisa mengakses harga transfer privat AWS.
  • Teknologinya keren, tapi sayang source-nya tidak dibuka. Jika mendukung self-hosting penuh dengan lisensi seperti FSL, saya akan mempertimbangkannya sebagai layanan komersial.
  • Mereka tampaknya memilih menghabiskan hidup untuk menjelaskan bahwa ini bukan S3.
  • Akan bagus jika seseorang membangun cara agar stream 'event' dapat diekspresikan sebagai yang bisa di-query per timestamp.
    • Mungkin lebih baik membuat pola atau framework yang menjadikan data yang bisa di-query dalam memori untuk beban kerja tertentu dibanding database tertentu.
  • Model nilai layanan yang menganggap validitas hanya setelah semua write tersimpan ke S3 terasa membingungkan.
    • Kemungkinan AWS bisa membangun layanan kompatibel protokol seperti reimplementasi Kafka.
  • Sedih karena tidak ada Java SDK. Karena mayoritas perusahaan memakai Spring atau Kafka client, ini bahkan membuat PoC sulit.
  • Sepertinya terlalu banyak overlap dengan AWS Kinesis Data Streams. Bagus sekali jika ada pesaing AWS.