Restructuring Vector Quantization with the Rotation Trick

Arxiv Papers

Το περιεχόμενο παρέχεται από το Igor Melnyk. Όλο το περιεχόμενο podcast, συμπεριλαμβανομένων των επεισοδίων, των γραφικών και των περιγραφών podcast, μεταφορτώνεται και παρέχεται απευθείας από τον Igor Melnyk ή τον συνεργάτη της πλατφόρμας podcast. Εάν πιστεύετε ότι κάποιος χρησιμοποιεί το έργο σας που προστατεύεται από πνευματικά δικαιώματα χωρίς την άδειά σας, μπορείτε να ακολουθήσετε τη διαδικασία που περιγράφεται εδώ https://el.player.fm/legal.

8d ago 23:23

MP3•Αρχική οθόνη επεισοδίου

This paper proposes a method to propagate gradients through VQ-VAEs' vector quantization layer, improving reconstruction metrics, codebook utilization, and quantization error across various training paradigms.

https://arxiv.org/abs//2410.06424

YouTube: https://www.youtube.com/@ArxivPapers

TikTok: https://www.tiktok.com/@arxiv_papers

Apple Podcasts: https://podcasts.apple.com/us/podcast/arxiv-papers/id1692476016

Spotify: https://podcasters.spotify.com/pod/show/arxiv-papers

--- Support this podcast: https://podcasters.spotify.com/pod/show/arxiv-papers/support

1597 επεισόδια

#Science #Igor Melnyk