एक मशीन पर एकाधिक सौर शार्ड्स प्रदर्शन में सुधार करते हैं?

Question

क्या एक मशीन पर एकाधिक सोलर शर्ड्स चलाना प्रदर्शन में सुधार करता है? मैं ल्यूसीन को बहु-थ्रेडेड होने की अपेक्षा करता हूं, लेकिन ऐसा लगता है कि यह मेरे भौतिक कोर पर 16 कोर कोर के साथ एक कोर से अधिक का उपयोग नहीं कर रहा है। मुझे एहसास है कि यह वर्कलोड निर्भर है, लेकिन किसी भी आंकड़े या मानक बहुत उपयोगी होंगे!

Answer 1

मैंने कुछ benchmarks of our search stack चलाया, और पाया कि अधिक सोलर शर्ड्स (16 भौतिक कोर के साथ एक मशीन पर) को 8 शर्ड्स तक प्रदर्शन में सुधार हुआ (जहां मुझे 6.5x की गति मिली)। यह ~ 1.5 मिलियन दस्तावेजों के साथ एक सूचकांक पर है, जटिल रेंज पूछताछ चला रहा है।

तो, ऐसा लगता है कि एकल सूचकांक के खिलाफ क्वेरी चलाने पर सोलर एकाधिक भौतिक कोर का लाभ नहीं लेता है।

Answer 2

आप वर्तमान में एक भी ठीकरा के साथ एक बॉक्स है, तो कई टुकड़ों में इस ठीकरा बंटवारे है:

• प्रवाह क्षमता खराब हो जाने की संभावना है,
• , विलंबता सुधार हो सकता है क्वेरी निष्पादन parallelizing द्वारा।

मैं आँकड़ों या बेंचमार्क के साथ प्रदान नहीं कर सकते, क्योंकि यह है कि क्या क्वेरी निष्पादन CPU या आई/ओ बाध्य है पर निर्भर करता है: यदि क्वेरी निष्पादन पहले से ही आई/ओ तो कई में ठीकरा बंटवारे एक बॉक्स पर बाध्य है shards भी थ्रूपुट खराब हो जाएगा। आपको खुद का परीक्षण करने की आवश्यकता होगी, बस एक उत्पादन लॉग लें और इसे दोनों दृश्यों में फिर से चलाने का प्रयास करें।