Google công bố SoundStream, codec âm thanh neural end-to-end

• Codec mạng nơ-ron đầu tiên có thể áp dụng cho cả giọng nói và âm nhạc

→ Có thể chạy theo thời gian thực trên CPU của smartphone

→ Mã hóa nhiều loại âm thanh khác nhau, bao gồm âm thanh chất lượng cao và giọng nói rõ ràng, giọng nói có nhiều tạp âm và tiếng vang, âm nhạc và âm thanh môi trường

• Được huấn luyện bằng mạng nơ-ron ở cả hai đầu, đồng thời thực hiện nén và cải thiện chất lượng âm thanh để cung cấp âm thanh chất lượng cao

→ SoundStream vượt Opus 12 kpbs ở mức 3kbps và cung cấp chất lượng tương đương EVS 9.6bps

→ Vì chỉ sử dụng ít hơn 3.2x-4x số bit nên có thể giảm mạnh lưu lượng truyền tải

→ Có khả năng khử nhiễu ở mức rất tốt

• Dự kiến sẽ được tích hợp vào Lyra, codec cho giọng nói bitrate thấp đã được công bố hồi đầu năm nay

[alstjr7375]

Opus cũng vốn nổi tiếng là rất tốt

Thật đáng kinh ngạc