6
संभावना वितरण एक समान होने पर एन्ट्रॉपी को अधिकतम क्यों किया जाता है?
मुझे पता है कि एन्ट्रापी एक प्रक्रिया / चर की यादृच्छिकता का माप है और इसे निम्नानुसार परिभाषित किया जा सकता है। रैंडम वेरिएबल सेट : - । मैकाय द्वारा एंट्रॉपी एंड इंफॉर्मेशन थ्योरी की पुस्तक में, वह Ch2 में यह कथन प्रदान करता हैX∈X∈X \inAAAH(X)=∑xi∈A−p(xi)log(p(xi))H(X)=∑xi∈A−p(xi)log(p(xi))H(X)= \sum_{x_i \in A} -p(x_i) …