auc पर टैग किए गए जवाब

एफ-स्कोर सटीक और रिकॉल का हार्मोनिक माध्य है। रिकॉल की y- एक्सिस सही पॉजिटिव रेट (जिसे रिकॉल भी किया जाता है) है। तो, कुछ समय के क्लासीफायर में कम रिकॉल, लेकिन बहुत अधिक एयूसी हो सकता है, इसका क्या मतलब है? एयूसी और एफ 1-स्कोर के बीच अंतर क्या हैं?

14 machine-learning  precision-recall  auc  accuracy 

कागल की प्रतियोगिता पोर्टो सेगुरो के सेफ ड्राइवर प्रेडिक्शन नॉर्मलाइज्ड गिनी स्कोर का मूल्यांकन मैट्रिक के रूप में करता है और इससे मुझे इस पसंद के कारणों के बारे में पता चला। मूल्यांकन के लिए एयूसी जैसे सबसे सामान्य मैट्रिक्स के बजाय सामान्यीकृत गिन्नी स्कोर का उपयोग करने के क्या …

14 classification  auc  model-evaluation  gini 

मेरे पास 100 मामलों और दो क्लासिफायर का एक परीक्षण सेट है। मैंने भविष्यवाणियों को उत्पन्न किया और आरओसी एयूसी, संवेदनशीलता और दोनों कक्षाओं के लिए विशिष्टता की गणना की। प्रश्न 1: अगर सभी स्कोर (आरओसी एयूसी, संवेदनशीलता, विशिष्टता) के संबंध में एक दूसरे से बेहतर है, तो मैं पी-वैल्यू …

14 machine-learning  statistical-significance  roc  auc  sensitivity-specificity 

आरओसी वक्र के तहत क्षेत्र की संभावना क्यों है कि एक क्लासिफायर बेतरतीब ढंग से चुनी गई "सकारात्मक" एक (मूल सकारात्मक वर्ग से) की तुलना में एक यादृच्छिक रूप से चुने गए "सकारात्मक" उदाहरण (पुनर्प्राप्त भविष्यवाणियों से) को रैंक करेगा? वास्तविक सकारात्मक और नकारात्मक श्रेणी के वितरण के CDF और …

14 probability  roc  auc 

बाइनरी परिणामों के साथ एक डेटा सेट को देखते हुए और कुछ भविष्यवाणिय मैट्रिक्स , मानक लॉजिस्टिक प्रतिगमन मॉडल गुणांक के बीटा +1 {MLE } जो द्विपद संभावना को अधिकतम करता है। जब एक्स पूर्ण रैंक है \ बीटा_ {एमएलई} अद्वितीय है; जब पूर्ण पृथक्करण मौजूद नहीं है, तो यह …

13 logistic  maximum-likelihood  auc 

दो या दो से अधिक वर्गीकरण मॉडल की तुलना करने के लिए उपयोग किया जाने वाला एक सामान्य उपाय आरओसी वक्र (एयूसी) के तहत क्षेत्र का उपयोग अपने प्रदर्शन का अप्रत्यक्ष रूप से आकलन करने के लिए है। इस मामले में एक बड़े AUC के साथ एक मॉडल आमतौर पर …

13 machine-learning  classification  roc  auc  model-evaluation 

जब हम एक यादृच्छिक वन की गुणवत्ता का आकलन करते हैं, उदाहरण के लिए एयूसी का उपयोग करते हुए, क्या इन मात्राओं को आउट ऑफ बैग नमूने पर या क्रॉस सत्यापन के होल्ड आउट पर गणना करना अधिक उपयुक्त है? मैंने सुना है कि OOB नमूनों पर इसकी गणना करने …

13 cross-validation  random-forest  auc 

मशीन लर्निंग में हम आरओसी वक्र (अक्सर संक्षिप्त AUC , या AUROC) के तहत क्षेत्र का उपयोग करके यह बता सकते हैं कि सिस्टम दो श्रेणियों के बीच कितना भेदभाव कर सकता है। सिग्नल डिटेक्शन सिद्धांत में अक्सर (संवेदनशीलता सूचकांक) का उपयोग एक समान उद्देश्य के लिए किया जाता है। …

13 machine-learning  roc  auc  signal-detection  d-prime 

मैं मात्रा समानता के लिए पासा गुणांक ( https://en.wikipedia.org/wiki/S%C3%B8rensen%E2%80%93Dice_coeffic ) और सटीकता ( https://en.wikipedia.org/wiki/Accuracy_and_prepy ) पर आता हूं। )। मुझे ऐसा लगता है कि ये दोनों उपाय समान हैं। कोई विचार?

13 descriptive-statistics  roc  accuracy  precision-recall  auc 

मैंने अपना मॉडल फिट कर लिया है और यह समझने की कोशिश कर रहा हूं कि क्या यह कोई अच्छा है। मैंने इसका आकलन करने के लिए अनुशंसित मैट्रिक्स की गणना की है ( / एयूसी / सटीकता / भविष्यवाणी त्रुटि / आदि), लेकिन यह नहीं जानता कि उनकी व्याख्या …

12 goodness-of-fit  r-squared  accuracy  auc  diagnostic 

मैं एक द्विआधारी वर्गीकरण कार्य कर रहा हूं जहां परिणाम संभावना काफी कम है (aroung 3%)। मैं यह तय करने का प्रयास कर रहा हूं कि क्या एयूसी या ऑप्ट-लॉस द्वारा ऑप्टिमाइज़ किया जाए। जितना मैंने समझा है, एयूसी वर्ग के बीच भेदभाव करने के लिए मॉडल की क्षमता को …

12 classification  binary-data  auc  log-loss 

मुझे बाइनरी वर्गीकरण की समस्या है और मैं इस पर अलग-अलग क्लासिफायर का प्रयोग करता हूं: मैं क्लासिफायर की तुलना करना चाहता हूं। कौन सा एक बेहतर उपाय AUC या सटीकता है? और क्यों? Raondom Forest: AUC: 0.828 Accuracy: 79.6667 % SVM: AUC: 0.542 Accuracy: 85.6667 %

11 machine-learning  classification  auc 

mgcvके लिए पैकेज Rफिटिंग टेन्सर उत्पाद बातचीत के लिए दो कार्य करता है: te()और ti()। मैं दोनों के बीच श्रम के बुनियादी विभाजन को समझता हूं (गैर-रैखिक बातचीत को फिट करना बनाम इस बातचीत को मुख्य प्रभावों और एक इंटरैक्शन में विघटित करना)। क्या मुझे समझ नहीं आता क्यों है …

11 r  gam  mgcv  conditional-probability  mixed-model  references  bayesian  estimation  conditional-probability  machine-learning  optimization  gradient-descent  r  hypothesis-testing  wilcoxon-mann-whitney  time-series  bayesian  inference  change-point  time-series  anova  repeated-measures  statistical-significance  bayesian  contingency-tables  regression  prediction  quantiles  classification  auc  k-means  scikit-learn  regression  spatial  circular-statistics  t-test  effect-size  cohens-d  r  cross-validation  feature-selection  caret  machine-learning  modeling  python  optimization  frequentist  correlation  sample-size  normalization  group-differences  heteroscedasticity  independence  generalized-least-squares  lme4-nlme  references  mcmc  metropolis-hastings  optimization  r  logistic  feature-selection  separation  clustering  k-means  normal-distribution  gaussian-mixture  kullback-leibler  java  spark-mllib  data-visualization  categorical-data  barplot  hypothesis-testing  statistical-significance  chi-squared  type-i-and-ii-errors  pca  scikit-learn  conditional-expectation  statistical-significance  meta-analysis  intuition  r  time-series  multivariate-analysis  garch  machine-learning  classification  data-mining  missing-data  cart  regression  cross-validation  matrix-decomposition  categorical-data  repeated-measures  chi-squared  assumptions  contingency-tables  prediction  binary-data  trend  test-for-trend  matrix-inverse  anova  categorical-data  regression-coefficients  standard-error  r  distributions  exponential  interarrival-time  copula  log-likelihood  time-series  forecasting  prediction-interval  mean  standard-error  meta-analysis  meta-regression  network-meta-analysis  systematic-review  normal-distribution  multiple-regression  generalized-linear-model  poisson-distribution  poisson-regression  r  sas  cohens-kappa 

क्योंकि मेरे पास बहुत असंतुलित डेटासेट (9% सकारात्मक परिणाम) हैं, मैंने फैसला किया कि एक सटीक-रिकॉल वक्र ROC वक्र की तुलना में अधिक उपयुक्त था। मैंने पीआर वक्र (.49, यदि आप रुचि रखते हैं) के तहत क्षेत्र का अनुरूप सारांश माप प्राप्त किया, लेकिन इसकी व्याख्या कैसे करें, इसके बारे …

11 classification  precision-recall  auc 

मैंने एक पेपर में इस कैप्शन को पढ़ा और कभी भी कहीं और इस तरह वर्णित AUC को नहीं देखा। क्या ये सच है? क्या यह देखने का कोई प्रमाण या सरल तरीका है? अंजीर। 2, रिसीवर-ऑपरेटिंग विशेषता वक्र (AUC) के तहत क्षेत्र के संदर्भ में व्यक्त किए गए द्विभाजनशील …

11 classification  roc  auc