सांख्यिकी और बिग डेटा

यादृच्छिक चर मान लें और स्वतंत्र हैं और हैं । दिखाएँ कि का \ पाठ {Exp} (1) वितरण।X1,...,XnX1,...,XnX_1, ... , X_nY1,...,YnY1,...,YnY_1, ..., Y_nU(0,a)U(0,a)U(0,a)Zn=nlogmax(Y(n),X(n))min(Y(n),X(n))Zn=nlog⁡max(Y(n),X(n))min(Y(n),X(n))Z_n= n\log\frac{\max(Y_{(n)},X_{(n)})}{\min(Y_{(n)},X_{(n)})}Exp(1)Exp(1)\text{Exp}(1) मैंने \ {X_1, ..., X_n, Y_1, ... Y_n \} = \ {Z_1, ..., Z_n \} की स्थापना करके इस समस्या को शुरू किया है ,{X1,...,Xn,Y1,...Yn}={Z1,...,Zn}{X1,...,Xn,Y1,...Yn}={Z1,...,Zn}\{X_1,...,X_n,Y_1,...Y_n\} = …

9 self-study  data-transformation  order-statistics 

पृष्ठभूमि: मेरे पास एक नमूना है जिसे मैं एक भारी पूंछ वाले वितरण के साथ मॉडल करना चाहता हूं। मेरे पास कुछ चरम मूल्य हैं, जैसे कि टिप्पणियों का प्रसार अपेक्षाकृत बड़ा है। मेरा विचार यह था कि मैं इसे सामान्यीकृत पारेतो वितरण के साथ जोड़ूं, और इसलिए मैंने यह …

9 confidence-interval  quantiles  asymptotics  order-statistics 

मैं चाहते हैं कुशलतापूर्वक नमूने आकर्षित से बाधा है कि के अधीन ।x∈Rdx∈Rdx \in \mathbb{R}^dN(μ,Σ)N(μ,Σ)\mathcal{N}(\mu, \Sigma)||x||2=1||x||2=1||x||_2 = 1

9 distributions  normal-distribution  sampling  multivariate-normal  importance-sampling 

मैं प्रतिगमन की एक सामान्य सेटअप, यह है कि, एक सतत समारोह मान एक परिवार से चुना जाता है दिए गए डेटा फिट करने के लिए ( किसी भी स्थान जैसे घन या वास्तव में किसी भी उचित टोपोलॉजिकल स्पेस) में कुछ प्राकृतिक मानदंडों के अनुसार हो सकता है।hθ:X→Rnhθ:X→Rnh_\theta:X\to \mathbb …

9 regression  machine-learning  multiple-regression 

डेटा विज़ुअलाइज़ेशन पर सलाह देने वाले प्रसिद्ध संसाधनों की बहुतायत है। (जैसे टफटे, स्टीफन कुछ एट अल , नाथन याउ ।) लेकिन इन सवालों के जवाब के लिए किस क्षेत्र (क्षेत्रों) की ओर रुख किया जा सकता है: क्या पाई चार्ट आलोचना व्यवहार में प्रासंगिक है? क्या लोग हैं जो …

9 data-visualization  interpretation  terminology  presentation 

मुझे एग्रोनॉमी और इकोलॉजी में उन्नत स्नातक छात्रों के लिए प्रायोगिक डिजाइन में एक पाठ्यक्रम प्रस्तावित करने के लिए कहा गया है। मैंने कभी भी ऐसा कोई कोर्स नहीं किया है, और मुझे यह जानकर आश्चर्य हुआ कि इस पाठ्यक्रम को "बियॉन्ड वन-वे एनोवा" के नाम से अधिक उपयुक्त रूप …

9 references  experiment-design  teaching 

यह वास्तव में गुजराती के बुनियादी अर्थमिति 4 वें संस्करण (Q3.11) की समस्याओं में से एक है और कहता है कि सहसंबंध गुणांक मूल और पैमाने के परिवर्तन के संबंध में अपरिवर्तनीय है, जो हैcorr ( एक एक्स+ बी , सी वाई+ डी) = क्रॉस ( एक्स, वाई)corr(aX+b,cY+d)=corr(X,Y)\text{corr}(aX+b, cY+d) = …

9 self-study  correlation  linear-algebra  mathematical-statistics 

मैं वेनिला उपनगर विधियों के माध्यम से लासो को हल करने के लिए सोच रहा था। लेकिन मैंने लोगों को समीपवर्ती ढाल वंश का उपयोग करने का सुझाव देते हुए पढ़ा है। क्या कोई यह उजागर कर सकता है कि लास्सो के लिए वेनिला उपनगर विधियों के बजाय समीपस्थ जीडी …

9 machine-learning  optimization  lasso  gradient-descent 

मैं समूह का एक साथ अलग-अलग डेटासेट बनाने की कोशिश कर रहा हूं, जिसमें अप्रयुक्त एल्गोरिदम (क्लस्टरिंग) का उपयोग किया गया है। समस्या यह है कि मेरे पास कई विशेषताएं हैं (~ 500) और मामलों की एक छोटी राशि (200-300)। अब तक मैं केवल वर्गीकरण समस्याओं के लिए करता था …

9 r  clustering  feature-selection  unsupervised-learning 

प्रकृति में सामान्य वितरण के महत्व के बारे में बहुत कुछ कहा गया है। ऊंचाई या वजन जैसे बहुत सारे माप लगभग सामान्य वितरित किए जाते हैं। लेकिन उनमें से कोई भी बिल्कुल सामान्य नहीं है, जहां तक ​​मैं समझता हूं। सामान्य वितरण को ध्यान में रखते हुए अधिकतम एन्ट्रापी …

9 normal-distribution  normality-assumption 

चलो एक्सएक्सX एक असतत रैंडम वैरिएबल हो, जिसमें इसके मान हों एनएन\mathbb{N}। मैं इस वैरिएबल को आधा करना चाहूंगा , यानी रैंडम वैरिएबल खोजनाYYY जैसे कि: एक्स= य+Y*एक्स=Y+Y*X = Y + Y^* कहाँ पे Y*Y*Y^* की एक स्वतंत्र प्रति है YYY। मैं इस प्रक्रिया को आधा करने की बात कर …

9 random-variable 

प्रतिगमन मॉडल के बीच चयन करने के लिए के-फोल्ड सीवी का उपयोग करते समय, मैं आमतौर पर प्रत्येक मॉडल के लिए अलग से सीवी त्रुटि की गणना करता हूं, साथ में इसकी मानक त्रुटि एसई, और मैं सबसे कम सीवी त्रुटि वाले मॉडल के 1 एसई के भीतर सबसे सरल …

9 regression  cross-validation  model-selection 

क्या चर का एक सेट होना संभव है जो असंबद्ध लेकिन रैखिक रूप से निर्भर हैं?KKK यानी औरcor(xi,xj)=0cor(xi,xj)=0cor(x_i, x_j)=0∑Ki=1aixi=0∑i=1Kaixi=0 \sum_{i=1}^K a_ix_i=0 यदि हाँ, तो आप एक उदाहरण लिख सकते हैं? EDIT: उत्तरों से यह निम्नानुसार है कि यह संभव नहीं है। क्या यह कम से कम संभव है कि जहां …

9 correlation  mathematical-statistics  multicollinearity 

मैं अपने कारक कॉलम को डमी चरों में बदलने की कोशिश कर रहा हूं: str(cards$pointsBin) # Factor w/ 5 levels ".lte100",".lte150",..: 3 2 3 1 4 4 2 2 4 4 ... labels <- model.matrix(~ pointsBin, data=cards) head(labels) # (Intercept) pointsBin.lte150 pointsBin.lte200 pointsBin.lte250 pointsBin.lte300 # 741 1 0 0 0 …

9 r  categorical-data  categorical-encoding 

Autoencoder नेटवर्क को सामान्य क्लासिफायर MLP नेटवर्क की तुलना में अधिक पेचीदा लगता है। Lasagne का उपयोग करने के कई प्रयासों के बाद, जो मुझे पुन: निर्मित आउटपुट में प्राप्त होता है, वह कुछ ऐसा है जो एमएनआईएसटीटी डेटाबेस की सभी छवियों का एक धुँधली औसत से मिलता-जुलता है, जो …

9 machine-learning  neural-networks  dimensionality-reduction  unsupervised-learning  autoencoders