Proyek open source yang mengubah suara mulut menjadi sound effect (New UX for sound generation)

Halo, saya membuat sebuah model lalu merilisnya sebagai open source, jadi saya ingin membagikannya.

Pernahkah Anda membutuhkan suara tertentu untuk membuat video atau game?

Di kepala Anda sudah ada gambaran yang tepat tentang bunyinya, tetapi mungkin Anda tidak punya cara untuk mengekspresikan dan mencarinya.

Karena alasan itu, jika Anda masuk ke rapat terkait suara di studio game, sering kali Anda akan mendengar lebih banyak bunyi seperti ini daripada percakapan biasa.

“Pyu pyu- daripada itu, mungkin lebih bagus kalau piyu↘︎piyu↘︎”

Jadi saya membuatnya!

Model yang saya buat adalah model yang menghasilkan sound effect ketika Anda menirukan suara yang diinginkan dengan mulut lalu memasukkannya ke model bersama teks sebagai input. (menggunakan cukup banyak waktu dan data)

repo: https://github.com/thxxx/VTS
demo: https://spicy-pufferfish-699.notion.site/VTS-347cf95761f480f19dc0eb790…

(Jika Anda membuka tautan demo dan mendengarkannya, Anda akan jauh lebih memahami maksudnya, haha)

[m00nlygreat]

Ini lucu juga wkwkwk