- Open source self-hosting yang otomatis mengubah video panjang menjadi shorts vertikal viral 9:16, mendukung pembuatan TikTok, Reels, dan YouTube Shorts
- Mengintegrasikan tiga alat menjadi satu
- Clip Generator: Mengubah video long-form → shorts viral (9:16). Secara otomatis menangkap momen terbaik, melacak wajah, dan melakukan crop. Subtitle juga ditambahkan otomatis
- AI Shorts: Membuat video pemasaran UGC dengan aktor AI. Cukup jelaskan produknya, lalu video avatar dengan lip-sync akan dibuat otomatis
- YouTube Studio: Membuat thumbnail, menghasilkan judul dan deskripsi viral secara otomatis, hingga menangani upload ke YouTube
- Deteksi momen viral AI: Google Gemini 3.0 Flash menganalisis transkrip dan batas adegan, mengekstrak 3–15 klip potensial berdurasi 15–60 detik, lalu memberi skor berdasarkan dampak emosional, kekuatan hook, dan potensi untuk dibagikan
- Crop vertikal pintar 9:16: AI melakukan reframing dalam mode ganda
- TRACK mode: Pelacakan subjek dengan deteksi wajah MediaPipe + cadangan YOLOv8
- GENERAL mode: Membuat latar belakang blur untuk group shot dan pemandangan
- Pembuatan subtitle otomatis: Timestamp per kata berbasis faster-whisper, dengan styling dan burn-in diproses otomatis
- Dubbing AI dalam lebih dari 30 bahasa: Integrasi ElevenLabs untuk menerjemahkan sambil mempertahankan karakteristik suara pembicara asli
- Overlay teks hook + efek video AI: Teks penarik perhatian pada 3 detik pertama, lalu Google Gemini membuat filter FFmpeg dinamis untuk menerapkan color correction, transisi, dan efek visual secara otomatis
- 100% self-hosting: Deployment ke mesin sendiri berbasis Docker, video tidak keluar dari infrastruktur pengguna, dan API key tidak disimpan di server karena dienkripsi di sisi klien
- Publikasi langsung ke media sosial: Posting langsung ke dashboard TikTok, Instagram Reels, dan YouTube Shorts, pelacakan progres upload asinkron, serta backup cloud S3
- Memanfaatkan free tier API secara maksimal: Google Gemini 1.500 request per hari (wajib), free tier ElevenLabs dan Upload-Post
- Dapat menggantikan solusi berbayar: Menyediakan fungsi setara alat bulanan $15–228 seperti Opus Clip dan Kapwing secara gratis, tanpa batas, dan tanpa watermark
- Tech stack: Google Gemini 3.0, faster-whisper, YOLOv8, MediaPipe, FFmpeg, ElevenLabs, fal.ai, React + Vite, Docker
- Repo : https://github.com/mutonby/openshorts
- Lisensi MIT
1 komentar
Bahasanya saat ini tampaknya baru mendukung bahasa Inggris dan Spanyol.