क्या अपाचे मेसोस जीपीयू कोर को पहचानता है?

Question

ट्विटर के ओपन सोर्स ऑफिस द्वारा this talk की स्लाइड में 25, प्रेजेंटर का कहना है कि मेसोस एक को भी GPU को ट्रैक और प्रबंधित करने की अनुमति देता है (मुझे लगता है कि वह जीपीजीपीयू का मतलब है) संसाधन। लेकिन मुझे कहीं और इस पर कोई जानकारी नहीं मिल रही है। क्या कोई मदद कर सकता है? मेसोस के अलावा, क्या अन्य क्लस्टर प्रबंधक हैं जो GPGPU का समर्थन करते हैं?

Answer 1

मेसोस अभी तक (जीपी) जीपीयू के लिए प्रत्यक्ष समर्थन प्रदान नहीं करता है, लेकिन कस्टम संसाधन प्रकारों का समर्थन करता है। यदि आप मेसोस-गुलाम शुरू करते समय --resources="gpu(*):8" निर्दिष्ट करते हैं, तो यह ढांचे के लिए संसाधन प्रस्ताव का हिस्सा बन जाएगा, जो इन संसाधनों का उपयोग करने का दावा करने वाले कार्यों को लॉन्च कर सकता है। एक बार जब तक कुछ जीपीयू संसाधनों का उपयोग किसी कार्य द्वारा किया जाता है, तब तक शेष संसाधन फिर से पेश किए जाएंगे, जब तक कि कार्य पूरा नहीं हो जाता है और जीपीयू संसाधन फिर से उपलब्ध हो जाते हैं। इस तरह, मेसो संसाधन संसाधन आवंटक वास्तव में आपके द्वारा घोषित जीपीयू संसाधनों को निर्धारित कर सकता है, और यह सुनिश्चित कर सकता है कि केवल घोषित राशि को ढांचे के लिए आवंटित/आवंटित किया जाए।

मेसोस को अभी तक जीपीयू अलगाव के लिए समर्थन नहीं है, लेकिन "प्लग करने योग्य आइसोलेटर मॉड्यूल" के साथ, आप जीपीयू संसाधन सीमा को लागू करने के लिए अपना स्वयं का जीपीयू आइसोलेटर बना सकते हैं।

वैकल्पिक रूप से, यदि आप अलग-अलग जीपीयू संसाधन आवंटित नहीं करना चाहते हैं, लेकिन केवल कुछ नोड्स को gpus होने के रूप में घोषित करना चाहते हैं, जबकि अन्य लोग नहीं करते हैं, तो आप केवल --attributes="hasGpu:true" या नोड्स को अलग करने के समान कुछ कर सकते हैं जो करते हैं/नहीं करते हैं gpus है। यह जानकारी संसाधन ऑफ़र में ढांचे पर भी पारित की जाती है, लेकिन इन विशेषताओं को एक चल रहे कार्य द्वारा "उपभोग" नहीं किया जा सकता है, इसलिए उन्हें हमेशा उस नोड के लिए पेश किया जाएगा।

अधिक जानकारी के लिए https://mesos.apache.org/documentation/attributes-resources/