Data2Vec - algoritme pembelajaran swasupervisi berperforma tinggi pertama yang bekerja untuk suara, visi, dan teks

• Kode, model pralatih, dan makalah yang dirilis sebagai open source oleh Meta AI

• Pembelajaran swasupervisi saat ini memang telah menopang berbagai kemajuan penting AI belakangan ini, tetapi masih sangat berbeda dari cara manusia sebenarnya menggabungkan beragam informasi dan mempelajarinya secara terpadu

→ Algoritme bertujuan tunggal yang dirancang untuk gambar sulit diterapkan pada teks

• data2vec adalah yang pertama bekerja pada berbagai modalitas seperti suara/visi/teks

→ Paradigma baru: pembelajaran swasupervisi holistik

→ Pada visi/suara, performanya lebih baik daripada algoritme bertujuan tunggal dan juga kompetitif di NLP

[ktasha45]

Menarik juga ya

[xguru]

Data2vec: kerangka kerja untuk pembelajaran berbagai modality https://smilegate.ai/2022/01/23/data2vec/