मुझे पता है, दो धाराओं के बीच शामिल होने के लिए अभी तक समर्थित नहीं है। लेकिन वैसे भी ऐसा करने का कोई तरीका है? या मुझे स्पार्क 2.2.0 के लिए इंतजार करना होगा? धन्यवादस्पार्क संरचित स्ट्रीमिंग पर मैं दो धाराओं के बीच कैसे जुड़ूं? - जावा 8
स्पार्क 2.2.0 अभी भी स्ट्रीम-स्ट्रीम में शामिल होने का समर्थन नहीं करेगा। आप इस टिकट देख सकते हैं: https://issues.apache.org/jira/browse/SPARK-18791
क्या यह 2.3 में उपलब्ध होगा? – user1870400
हां। 2.3 इसका समर्थन करेगा। – zsxwing
हाय! मैं सिर्फ स्पार्क 2.3 आरसी 4 स्ट्रीम-स्ट्रीम में शामिल था। किसी भी तरह से मैं स्ट्रीमिंग डेटाफ्रेम पर आसानी से शामिल नहीं हो सका। और मुझे यकीन नहीं है कि क्यों .. यह मेरा वाक्यविन्यास हो सकता है लेकिन मुझे यकीन नहीं है .. अधिक जानकारी यहां https://stackoverflow.com/questions/48900127/how-to-do-a-self-join-in-spark -2-3-0-क्या-सही-वाक्य-वाक्य अच्छा होगा यदि आप इस पर मदद कर सकते हैं !! – user1870400
मैं तुम्हें काफ्का स्ट्रीम के बजाय संरचित स्पार्क स्ट्रीमिंग का उपयोग कर यदि आप धाराओं में शामिल करना चाहते सलाह देते हैं .. check this link to see how this can be done
धन्यवाद, लेकिन मैंने पहले ही कफका स्ट्रीम का उपयोग किया है। मैं विशिष्ट कारणों से कुछ अलग स्ट्रीमिंग इंजनों को आजमाने की कोशिश करता हूं: डी –
स्पार्क 2.3 के उत्पादन रिलीज़ है, इसलिए stream-stream joins अब संरचित स्ट्रीमिंग में समर्थित हैं ।
क्या आपको संरचित स्ट्रीमिंग के साथ ऐसा करने का कोई तरीका मिला? – vkr