VQ-VAE

VQ-VAE とは、潜在表現を連続的な値ではなく、あらかじめ用意した有限個のベクトルのどれかに割り当てる VAE です。

色見本帳から最も近い色を選ぶように、近いベクトルを選んで表現します。連続値のときに起こりがちな、ぼやけた生成結果を避けられます。

離散的な表現は言語モデルとも相性がよく、高品質な画像生成や音声合成の土台として使われています。