मशीन लर्निंग का उपयोग करके कुछ काम करना मुझे अपनी भाषा के लिए एक मॉडल को प्रशिक्षित करने की आवश्यकता है। चूंकि वे केवल अंग्रेजी जर्मन और स्पेनिश प्रदान करते हैं, इसलिए वे विकिपीडिया कॉर्पस को लेने और उस के साथ मॉडल को प्रशिक्षित करने की सलाह देते हैं।
मुद्दा यह है कि वे 128GB RAM की सलाह देते हैं। जिस मशीन पर मैं यह प्रशिक्षण देता हूँ उसमें 24GB RAM और 100GB से कम डिस्क स्थान होता है।
क्या मैं एक स्वैप बना सकता हूं जो पूरी डिस्क को भरता है? डिस्क पर 75% रैम मधुमक्खी के साथ काम शायद 100% अधिक समय लेने वाला है (वे पहले से ही एक अच्छी मशीन पर एक दिन से अधिक कहते हैं)?
क्या ज्यादातर स्वैप मेमोरी के साथ 24 जीबी मशीन पर प्रयास करना उचित है या क्या मुझे एक एडब्ल्यूएस वीएम की तलाश करनी चाहिए जिसमें गेट से जाने की सही आवश्यकताएं हों?
3
"100% लंबे समय तक" एक व्यापक समझ है। डिस्क स्वैप इतना धीमा है (विशेषकर यदि आप एचडीडी पर हैं) तो आप शायद देख रहे हैं कम से कम 1000% लंबा। यहां तक कि परिमाण या दो के क्रम से बंद हो सकता है।
—
Bob
ठीक है, तो यह शायद एक उचित समाधान नहीं है। धन्यवाद मैं एक अन्य मशीन या पहले से ही प्रशिक्षित मॉडल की तलाश करूँगा।
—
florent teppe
@ याकूब अनुभव से (एक 3 सेकंड का मैटलैब जॉब, जो 4GB रैम के साथ सिस्टम में 30GB से अधिक मेमोरी चाहता है, C में ऑटो-कोडिंग के बाद) यह लगभग 700 का एक कारक था। निश्चित रूप से यह वास्तव में चल रहा है के आधार पर अलग-अलग होगा। और अगर यह एक "अच्छी मशीन" पर एक दिन के बारे में लेता है, तो आप अभी भी दो साल के प्रशिक्षण को देख रहे होंगे ... आप बिजली की लागत के साथ नौकरी के लिए एक सभ्य (पर्याप्त) मशीन खरीद सकते हैं।
—
Baldrickk