3
मैं केवल उप-डोमेन को हटाने के लिए robots.txt का उपयोग कैसे कर सकता हूं?
मेरे कोड बेस कई वातावरण (लाइव, मचान, देव) और उप-डोमेन (बीच साझा किया जाता staging.example, dev.example, आदि) और केवल दो क्रॉल करने की अनुमति दी जानी चाहिए (यानी। www.exampleऔर example)। सामान्य रूप से मैं संशोधित /robots.txtऔर जोड़ना चाहूंगा Disallow: /, लेकिन साझा कोड आधार के कारण मैं /robots.txtसभी (उप) डोमेन …