Memverifikasi kualitas blog secara otomatis dengan pipeline ulasan paralel Gemini + Claude
(blog.neocode24.com)Saya menyerahkan peninjauan blog kepada 5 AI, dan ternyata benar-benar menemukan masalah
Bagian tersulit setelah menulis adalah menyunting sendiri. Setiap kali, saya harus menghabiskan banyak waktu untuk membaca draf yang dihasilkan AI baris demi baris lalu memperbaikinya.
Karena itu, saya mencoba membuat pipeline yang membuat AI meninjau AI secara langsung.
** Strukturnya saya buat sederhana **
- 2 Gemini, 2 Claude, dan 1 sesi saat ini — total 5 Critic dijalankan secara bersamaan dengan Bash
& - Masing-masing diminta membaca dengan persona berbeda: "developer senior yang baru pertama melihatnya", "orang yang pernah memakai teknologi ini", "editor", "pembaca yang akan mencoba mengikuti", "penanggung jawab SEO"
- Skor diterima dalam bentuk JSON; jika rata-rata di atas 8 maka lolos, jika tidak maka umpan balik diterapkan lalu dievaluasi ulang
** Apa yang benar-benar berhasil ditemukan **
Pada putaran pertama, rata-ratanya 7,6. Critic "pembaca yang akan mencoba mengikuti" memberi nilai 3 karena tidak ada contoh kode, dan itu adalah bagian yang mungkin akan saya lewatkan kalau membacanya sendiri. Setelah menambahkan 3 code block dan mengubah troubleshooting berbentuk daftar menjadi narasi, putaran kedua lolos dengan nilai 8,4.
** Setelah dijalankan, terlihat celah strukturalnya **
Saat umpan balik antar-Critic saling bertentangan, sistem menilai sendiri lalu lewat begitu saja tanpa keputusan. Jika skor rata-rata tinggi, nilai gagal pun bisa ikut lolos. Jika parsing gagal, seluruh proses berhenti.
Karena itu, saya menambahkan mediator Synthesis, menerapkan pengaturan Veto dan syarat gagal minimum, serta menanganinya dengan parser fallback.
** Pada akhirnya, publikasi saya ubah dari push menjadi PR **
Sebagai Human-In-The-Loop, meskipun AI sudah mencapai kesepakatan, tetap harus melalui mata manusia. Tabel skor Critic dimasukkan ke PR body, dan jika saya meninggalkan komentar per baris, AI akan menambahkan commit perbaikan. Loop ini diulang sampai sebelum merge.
Ya, pada akhirnya artikel ini juga diterbitkan dengan pipeline yang sama.
3 komentar
Teori internet mati...
Biaya per item tampaknya tidak akan murah.
Karena ini langganan, rasanya tidak terlalu membebani, tetapi sepertinya juga tidak bisa diabaikan.