डेटा के बड़े बंडल को हटाने के बाद कैसंड्रा लुकअप क्वेरी काफी धीमी है

Question

वर्तमान में, मेरे पास 100,000 से अधिक कहने के लिए डेटा की बड़ी पंक्तियों वाला एक कैसंड्रा कॉलम परिवार है। अब, मैं इस कॉलम परिवार में सभी डेटा को हटाना चाहता हूं और समस्या आई है:

सभी डेटा हटा दिए जाने के बाद, मैं इस कॉलम परिवार में एक लुकअप क्वेरी निष्पादित करता हूं, कैसंड्रा को वापस आने के लिए सेकंड का समय लगेगा एक खाली क्वेरी परिणाम। और समय लागत Linearly में वृद्धि होगी जब मूल डेटा बड़ा

है यह समाधि का पत्थर सुविधा के कारण होता है, जबकि कैसेंड्रा डेटाबेस से डेटा हटा रहा है। अगली जीसी निकाल दिए जाने तक लुकअप की गति सामान्य तक ठीक नहीं होगी। Cassandra Distributed Deletes देखें।

क्योंकि इस तरह के क्वेरी ऑपरेशंस का उपयोग अक्सर मेरे सिस्टम में किया जाता है, मैं कुछ सेकंड तक विशाल विलंबता सहन नहीं कर सकता।

क्या आप कृपया मुझे इस समस्या का समाधान दें?

Answer 1

यह डेटाबेस का उपयोग करने के लिए एक बहुत ही खराब तरीका की तरह लगता है। इसे पॉप्युलेट करें, इसे खाली करें, दोहराएं। एक बार जब आप अपनी समस्या का समाधान कर सकते हैं, तो प्रत्येक बार अलग-अलग सीएफ नामों का उपयोग करके, जब आप डेटा खाली करते हैं और इसे फिर से शुरू करना शुरू करते हैं, तो एक नया कॉलम परिवार बनाएं और इसका उपयोग करें और अन्य कोलम परिवार छोड़ दें, हालांकि यह हैकी है।

मैं आपकी समस्या को हल करने के लिए कंपैक्शन (gets rid of all the tombstones it can detect) का उपयोग करने का सुझाव दूंगा, यह सीपीयू गहन है लेकिन प्रतिक्रियाओं के जवाब देने के लिए सेकंड के इंतजार से बेहतर है। gc_grace_seconds डिफ़ॉल्ट रूप से 10 दिनों के लिए सेट है तो आप शायद करना होगा,

./nodetool compact <ks_name> <cf_name> 

Ritchard के दृष्टिकोण एक अच्छा एक है: आप संकुचित करने के लिए चाहते हैं विशिष्ट ks & सीएफ उपलब्ध कराने के द्वारा कार्य कम आपकी मशीन पर गहन बना सकते हैं टॉम्बस्टोन से छुटकारा पाने के लिए कॉम्पैक्शन की अनुमति देने के लिए इसे ट्वीक करें।

Answer 2

@Fify

अपने कॉलम परिवार अक्सर है संशोधित (पढ़ने के बाद अपडेट तो अद्यतन फिर से पढ़ें ...), आप leveled compaction strategy

का उपयोग करना चाहिए नष्ट कर दिया स्तंभ निकाले quickier बनाने के , अपने कॉलम परिवार gc_grace_seconds