Machine Learning - Thoery/Deep Learning
D3PM 설명 (Discrete denoising diffusion probabilistic models 설명)
Discrete denoising diffusion probabilistic models (D3PM)은 그래프, 텍스트와 같은 discrete 데이터에 적용할 수 있는 diffusion model을 말한다. D3PM은 Markov transition matrix를 활용해 각각의 diffusion step을 모델링하였고, 이 transition matrix의 선택에 따라 생성 모델의 결과가 달라질 수 있음을 보였다. 이번 글에서는 D3PM 모델이 어떻게 continous가 아닌 discrete 데이터를 모델링하는지에 대해 알아보겠다. * 이 글은 diffusion model에 대한 기본적인 이해가 있다고 가정한다. Key idea 우선, D3PM의 핵심 아이디어에 대해 살펴보겠다. D3PM은 위에서도 언급..
2023. 1. 21. 22:37
최근댓글