मैं कुछ वेबस्टेट्स प्राप्त करने के लिए हमारे अमेज़ॅन एस 3 एक्सेस लॉग को पार्स करने का एक तरीका खोजने की कोशिश कर रहा हूं।
मैं AWStats 7 का उपयोग करने की कोशिश कर रहा हूं, लेकिन मुझे इस बात की जानकारी है कि किसी दिए गए महीने के 9 दिन बाद यह किसी भी अधिक लॉग को संसाधित नहीं कर सकता है क्योंकि यह मेमोरी से बाहर चलाता है। इस सर्वर में 4gigs मेमोरी है
हमारे S3 लॉग बल्कि बड़े हैं (~ 1gig / दिन) और जल्द ही CloudFront लॉग 10-20gigs / day हो सकते हैं।
क्या कोई ऐसा सॉफ्टवेयर है जो S3 (और जल्द ही क्लाउडफ्रंट) लॉग से वेबस्टैट जनरेट कर सकता है?
मुझे s3stat.com के बारे में पता है, लेकिन मुझे कुछ चाहिए जो मैं अपने दम पर चला सकूं।
मैं उन्हें थोड़ा सा पायथन स्क्रिप्ट के साथ वेब्लाइज़र का उपयोग करके संसाधित करता हूं ताकि डेटा थोड़ा सा घूम सके ताकि यह ठीक से काम कर सके। वैबलाइज़र के माध्यम से प्रत्येक लॉग को व्यक्तिगत रूप से डेटाबेस को अपडेट करने के बजाय एक बड़ी फ़ाइल में लॉग को मिलाएं और उस प्रक्रिया को करने की कोशिश करें।
—
स्मज करें
क्या आपके पास कोड है जो s3 लॉग को प्रारूप में परिवर्तित करता है जिसे वेबलाइज़र समझ सकता है? या वेबमास्टर के लिए अधिमानतः पैच s3 / क्लाउडफ़्रंट लॉग को समझने के लिए? अभी के लिए मेरे लॉग दिन से विभाजित हैं।
—
Mxx
बेतकल्लुफ़ नहीं, मैं अगर मैं इसे हड़पने जब मैं घर आज रात प्राप्त कर सकते हैं और सार पर यह छड़ी देखेंगे
—
धब्बा
अरे @Sam आपके पास उस स्क्रिप्ट को खोजने का मौका था?
—
एमएक्स