Google वेबमास्टर टूल इसे देख सकते हैं, लेकिन मैं इसे नहीं ढूँढ सकता। किसी भी विचार पर यह कैसे उत्पन्न होता है या यह फ़ाइल संरचना कहाँ है? मैं अपनी जड़ में फ़ाइल नहीं देखता। मेरी वेबसाइट http://mikewills.me पर है और robots.txt फ़ाइल URL http://mikewills.me/robots.txt है ।
अंत में, Google मेरी साइट को अनुक्रमणित नहीं कर रहा है और मैं यह पता लगाने की कोशिश कर रहा हूं कि robots.txt को कैसे संपादित किया जाए ताकि अनुक्रमण की अनुमति हो। मैंने अनुक्रमण को अनुमति देने के लिए गोपनीयता विकल्प बदल दिया है, लेकिन उसने robots.txt को अपडेट नहीं किया है।