स्पार्क मेमोरी में काम करने वाले डेटासेट को कैश करता है और फिर मेमोरी की गति पर कंप्यूटेशंस करता है। क्या यह नियंत्रित करने का कोई तरीका है कि कामकाजी सेट रैम में कितनी देर तक रहता है?मेमोरी कैशिंग में अपाचे स्पार्क
मेरे पास नौकरी के माध्यम से उपयोग की जाने वाली बड़ी मात्रा में डेटा है। शुरुआत में रैम को नौकरी लोड करने में समय लगता है और जब अगली नौकरी आती है, तो उसे सभी डेटा फिर से रैम में लोड करना होता है जो समय लेने वाला होता है। स्पार्क का उपयोग कर डेटा को हमेशा के लिए डेटा (या निर्दिष्ट समय के लिए) कैश करने का कोई तरीका है?
धन्यवाद सुजी। मैंने इस समाधान पर काम किया है। – Atom