मैं उपयोगकर्ता-स्पेस टूल (अधिमानतः पाइथन में - इसे छोड़कर, कुछ भी आसानी से संशोधित कर सकता हूं अगर मैं इसे पहले से ही कर सकता हूं) को प्रतिस्थापित करने के लिए एक छोटी स्क्रिप्ट मुझे लगता है कि नीचे दो बातें करता है का उपयोग कर: लोड, उपलब्ध स्मृति के लिएनौकरी शेड्यूलिंग के लिए पायथन लाइब्रेरी, एसएसएच
- चुनाव कम से कम 100 कंप्यूटर (फेडोरा 13, यह बहुत होता है), और अगर यह किसी तरह लग रहा है उन्हें उपयोग कर रहा है
- नौकरियों के लिए अच्छे मेजबान का चयन करता है, एसएसएच पर इन नौकरियों को चलाता है। ये नौकरियां मनमानी कमांड लाइन प्रोग्रामों का निष्पादन हैं जो एक साझा फाइल सिस्टम को पढ़ और लिखती हैं - आम तौर पर छवि प्रसंस्करण स्क्रिप्ट या समान - सीपीयू, कभी-कभी स्मृति गहन कार्य।
, मेरे वर्तमान स्क्रिप्ट का उपयोग कर, मैं एक अजगर शीघ्र
>>> import hosts
>>> hosts.run_commands(['users']*5)
में या कमांड लाइन
% hosts.py "users" "users" "users" "users" "users"
users 5 बार (चलाने के लिए
से कर सकते हैं कंप्यूटर जिस पर कमांड को सीपीयू लोड और कॉन्फ़िगरेशन फ़ाइल से कम से कम 5 कंप्यूटरों पर उपलब्ध मेमोरी की जांच करके चलाया जा सकता है)। स्क्रिप्ट के अलावा कोई नौकरी सर्वर नहीं होना चाहिए, और कंप्यूटर पर कोई कार्यकर्ता डिमन्स या प्रक्रिया नहीं है जो इन आदेशों को चलाएगा।
मैं अतिरिक्त रूप से नौकरियों को ट्रैक करने, विफलता पर फिर से नौकरियों को चलाने में सक्षम होना चाहता हूं, लेकिन ये अतिरिक्त सुविधाएं हैं (वास्तविक नौकरी शेड्यूलर में बहुत मानक) जिन्हें मुझे वास्तव में आवश्यकता नहीं है।
मुझे पाइथन के लिए अच्छी एसएसएच लाइब्रेरी मिली हैं, classh और PuSSH जैसी चीजें, जिनके पास (बहुत सरल) भार संतुलन सुविधाओं की आवश्यकता नहीं है। मैं जो चाहता हूं उसके दूसरी तरफ कोंडोर या स्लरम है, जैसा कि मैंने स्पष्ट किया है, मैंने स्पष्ट रूप से कुछ हल्का करना चाहते हैं। वे चीजों को उचित तरीके से कर रहे होंगे, लेकिन उनके बारे में पढ़ने से, वे उन्हें केवल उपयोगकर्ता स्थान में कताई की तरह लगते हैं जब मुझे उनकी आवश्यकता होती है तो असंभव हो जाएगा। यह एक समर्पित क्लस्टर नहीं है, और मेरे पास इन होस्टों पर रूट पहुंच नहीं है।
मैं वर्तमान में कंप्यूटर के कुछ बुनियादी मतदान के साथ कक्षा के चारों ओर एक रैपर का उपयोग करने की योजना बना रहा हूं, जब भी मुझे पता होना चाहिए कि अगर मैं कुछ और नहीं ढूंढ पा रहा हूं तो वे कितने व्यस्त हैं।
किस तरह की नौकरियां? [कपड़े] (http://docs.fabfile.org/en/1.0.1/index.html) (एसएसएच रैपर, कोई नौकरी शेड्यूलिंग नहीं), [जेनकींस] (https://wiki.jenkins-ci.org/display/जेन्किन्स/मीट + जेनकींस) (सीआई उपकरण: दोहराने योग्य कार्य, शून्य-सेटअप, सरल लोड संतुलन), [डिस्को] (http://discoproject.org/) (मैपरीडस, एरलांग + पायथन, केवल पायथन नौकरियां?), हडूप (बड़ा, जड़ की आवश्यकता है?), पीबीएस (टोक़ - पारंपरिक वर्कलोड प्रबंधन प्रणाली)। – jfs
धन्यवाद जेएफ, यह कहने के लिए प्रश्न संपादित किया गया है कि नौकरियां कमांड लाइन प्रोग्राम चला रही हैं जो साझा फ़ाइलों को पढ़ने, पढ़ने और लिखने की प्रक्रिया करती हैं। – Thomas
फैब्रिक इस उपयोग के लिए उचित हो सकता है, लेकिन कोड के समांतर निष्पादन तक एक सुविधा नहीं है। – Thomas