Data2Vec - thuật toán học tự giám sát hiệu năng cao đầu tiên hoạt động cho giọng nói, thị giác và văn bản

<p>- Mã nguồn, mô hình tiền huấn luyện và bài báo do Meta AI công bố dưới dạng mã nguồn mở <br /> - Học tự giám sát hiện nay đã hỗ trợ những bước tiến quan trọng gần đây của AI, nhưng vẫn còn khác rất xa với cách con người thực sự kết hợp nhiều loại thông tin và tiếp thu chúng một cách tổng hợp <br /> → Các thuật toán đơn mục đích được thiết kế cho hình ảnh rất khó áp dụng cho văn bản <br /> - data2vec là mô hình đầu tiên hoạt động trên nhiều phương thức (modalities) như giọng nói/thị giác/văn bản<br /> → Một mô hình mới: học tự giám sát toàn diện<br /> → Trong thị giác và giọng nói, nó cho hiệu năng vượt trội hơn các thuật toán đơn mục đích và cũng có tính cạnh tranh trong NLP<br /> </p>

[ktasha45]

<p>Thú vị đấy</p>

[xguru]

<p>Data2vec: khung học tập cho nhiều modality khác nhau https://smilegate.ai/2022/01/23/data2vec/</p>;