सांख्यिकी और बिग डेटा

मैं पर पढ़ने किया गया है -values, प्रकार 1 त्रुटि दर, महत्व स्तर, शक्ति गणना, प्रभाव आकार और फिशर बनाम Neyman-पियर्सन बहस। इससे मुझे कुछ अटपटा सा लगा। मैं पाठ की दीवार के लिए माफी मांगता हूं, लेकिन मैंने महसूस किया कि इन अवधारणाओं की मेरी वर्तमान समझ का अवलोकन …

31 hypothesis-testing  statistical-significance  confidence-interval  p-value  effect-size 

मोरे एट अल (2015) का तर्क है कि विश्वास अंतराल भ्रामक हैं और उनकी समझ से संबंधित कई पूर्वाग्रह हैं। दूसरों के बीच, वे निम्नलिखित के रूप में सटीक गिरावट का वर्णन करते हैं: परिशुद्धता की गिरावट आत्मविश्वास अंतराल की चौड़ाई पैरामीटर के बारे में हमारे ज्ञान की सटीकता को …

31 bayesian  confidence-interval  frequentist  precision 

मैं काउंटर डेटा के लिए प्रतिगमन मॉडल पर सेलर्स और शुमेली द्वारा एक बहुत ही दिलचस्प लेख पढ़ रहा हूं । शुरुआत के करीब (पृष्ठ 944) वे मैककुल्फ और नेल्डर (1989) का हवाला देते हुए कहते हैं कि नकारात्मक द्विपद प्रतिगमन अलोकप्रिय है और एक समस्याग्रस्त विहित लिंक है। मुझे …

31 regression  modeling  negative-binomial 

क्या "गहरी सीख" मल्टीलेवल / पदानुक्रमित मॉडलिंग के लिए सिर्फ एक और शब्द है? मैं पूर्व की तुलना में उत्तरार्द्ध से बहुत अधिक परिचित हूं, लेकिन मैं जो बता सकता हूं, उससे प्राथमिक अंतर उनकी परिभाषा में नहीं है, लेकिन उनका उपयोग और मूल्यांकन उनके आवेदन डोमेन के भीतर कैसे …

31 machine-learning  multilevel-analysis  hierarchical-bayesian  deep-learning 

मैंने 2009 में एक सांख्यिकीविद् के साथ चर्चा की, जहां उन्होंने कहा कि पी-मूल्य का सटीक मूल्य अप्रासंगिक है: केवल एक चीज जो महत्वपूर्ण है वह महत्वपूर्ण है या नहीं। यानी एक परिणाम दूसरे से अधिक महत्वपूर्ण नहीं हो सकता है; उदाहरण के लिए आपके नमूने, या तो एक ही …

31 statistical-significance  p-value  bonferroni 

यह सवाल मेरे दोस्त ने पूछा था जो इंटरनेट का जानकार नहीं है। मेरे पास कोई सांख्यिकी पृष्ठभूमि नहीं है और मैं इस प्रश्न के लिए इंटरनेट पर खोज कर रहा हूं। सवाल यह है कि क्या आउटेल को माध्य मान से बदलना संभव है? यदि यह संभव है, तो …

31 mean  outliers  robust  winsorizing 

/ संपादित करें: आगे का अनुसरण करें अब आप irlba :: prcomp_irlba का उपयोग कर सकते हैं / संपादित करें: मेरी अपनी पोस्ट पर चल रहा है। irlbaअब "केंद्र" और "पैमाने" तर्क हैं, जो आपको सिद्धांत घटकों की गणना करने के लिए इसका उपयोग करते हैं, उदाहरण के लिए: pc …

31 r  pca  dimensionality-reduction  svd  matrix-decomposition 

जोहानसन (2011) में " जय हो असंभव: P-मूल्यों, सबूत, और संभावना है " (यहाँ भी है पत्रिका के लिए लिंक कहा गया है कि कम) -values अक्सर अशक्त के खिलाफ मजबूत साक्ष्य के रूप में माना जाता है। जोहानसन का तात्पर्य यह है कि लोग शून्य के खिलाफ सबूतों पर …

31 hypothesis-testing  statistical-significance  p-value  philosophical 

सामान्य रूप से मैप्स, बहुभुज और छायांकित क्षेत्रों के लिए रंग अंधा-अनुकूल रंग विकल्पों के बारे में बहुत कुछ लिखा गया है (उदाहरण के लिए देखें http://colorbrewer2.org )। मैं रेखाचित्रों के लिए लाइन रंगों और अलग-अलग लाइन मोटाई के लिए सिफारिशें नहीं पा सका हूं। लक्ष्य हैं: आसानी से अंतर …

31 r  data-visualization 

GBM का उपयोग करके परीक्षण मापदंडों (यानी इंटरैक्शन डेप्थ, माइनचाइल्ड, सैंपल रेट आदि) के लिए कुछ उपयोगी दिशानिर्देश क्या हैं? मान लें कि मेरे पास 70-100 सुविधाएँ हैं, 200,000 की आबादी है और मैं 3 और 4 की बातचीत की गहराई का परीक्षण करने का इरादा रखता हूं। स्पष्ट रूप …

31 r  hypothesis-testing  cart  boosting 

में इस पत्र , प्रतिभाशाली शोधकर्ता कोस्मा शालिज़ी का तर्क पूरी तरह से एक व्यक्तिपरक बायेसियन दृश्य स्वीकार करने के लिए, एक भी एक unphysical नतीजा यह है कि समय के तीर (एन्ट्रापी के प्रवाह द्वारा दिए गए) वास्तव में जाना चाहिए स्वीकार करना चाहिए कि पीछे की ओर । …

31 bayesian  entropy  maximum-entropy  philosophical 

दो गैर-अतिव्यापी आबादी (रोगियों और स्वस्थ, कुल ) के एक डेटासेट में मैं निरंतर आश्रित चर के लिए महत्वपूर्ण ( स्वतंत्र चर में से) महत्वपूर्ण भविष्यवाणियां खोजना चाहता हूं । भविष्यवक्ताओं के बीच सहसंबंध मौजूद है। मुझे यह पता लगाने में दिलचस्पी है कि क्या भविष्यवाणियों में से कोई भी …

31 regression  pca  feature-selection  stepwise-regression  underdetermined 

सामान्य डेटा-आधारित चर चयन प्रक्रियाएं (उदाहरण के लिए, आगे, पिछड़े, स्टेपवाइज, सभी सबसेट) अवांछनीय गुणों वाले मॉडल का उत्पादन करते हैं, जिनमें शामिल हैं: गुणांक शून्य से दूर पक्षपाती। मानक त्रुटियां जो बहुत छोटी हैं और आत्मविश्वास अंतराल जो बहुत संकीर्ण हैं। परीक्षण के आँकड़े और पी-मान जिनका विज्ञापित अर्थ …

31 modeling  feature-selection 

मैं ElemStatLearn की किताब "द एलिमेंट्स ऑफ स्टैटिस्टिकल लर्निंग: डेटा माइनिंग, इनविज़न एंड प्रेडिक्शन। दूसरा संस्करण" ट्रेवर हस्ती और रॉबर्ट टिब्शिरानी और जेरोम फ्रीडमैन की पुस्तक में वर्णित प्लॉट जनरेट करना चाहता हूं। साजिश है: मैं सोच रहा हूं कि मैं इस सटीक ग्राफ को कैसे बना सकता हूं R, …

31 r  data-visualization  k-nearest-neighbour 

मेरे काम में, हम डेटा के कुछ सेटों के लिए अनुमानित रैंकिंग बनाम वास्तविक रैंकिंग की तुलना कर रहे हैं। हाल तक तक, हम अकेले केंडल-ताऊ का उपयोग कर रहे हैं। इसी तरह की परियोजना पर काम करने वाले एक समूह ने सुझाव दिया कि हम इसके बजाय गुडमैन-क्रुस्ल गामा …

31 spearman-rho  kendall-tau  goodman-kruskal-gamma