2
एक इकाई गाऊसी के साथ केएल नुकसान
मैं एक वीएई को लागू कर रहा हूं और मैंने सरलीकृत यूनीवेट गॉसियन केएल विचलन के दो अलग-अलग कार्यान्वयन ऑनलाइन देखे हैं। यहाँ के अनुसार मूल विचलन है कएलएल ओ एस एस= लॉग(σ2σ1) +σ21+ (μ1-μ2)22σ22-12KLloss=log(σ2σ1)+σ12+(μ1−μ2)22σ22−12 KL_{loss}=\log(\frac{\sigma_2}{\sigma_1})+\frac{\sigma_1^2+(\mu_1-\mu_2)^2}{2\sigma^2_2}-\frac{1}{2} यदि हम मानते हैं कि हमारी पूर्व इकाई गौसियन है μ2= 0μ2=0\mu_2=0 तथा σ2= …