MongoDB: mapReduce दुष्प्रभाव

Question

हमारे मानचित्र के विकास के दौरान-नौकरियों को कम करने के दौरान हमारे एमआर कोड डेटा-कम होने वाले डेटा के स्वतंत्र डायग्नोस्टिक डेटा संरचनाओं को स्वतंत्र रूप से उत्पन्न करता है। क्या इन आंकड़ों को उस कोड पर लाने का कोई आसान तरीका है जिसे मैपराइडस कहा जाता है या उन्हें मोंगो में बने रहने का कोई आसान तरीका है? बस लॉग फ़ाइल में लिखना बहुत उप-इष्टतम होने के रूप में बदल रहा है (ए) वहां पहले से बहुत सारे डेटा हैं और (बी) हमारी नैदानिक ​​जानकारी अत्यधिक संरचित है और वास्तव में, हम इसके खिलाफ प्रश्नों को चलाने के लिए चाहते हैं यह।

मेरी जांच अब तक बताती है कि एमआर डेटा संरचना मूल्य (धारावाहिकरण के माध्यम से) द्वारा पारित की जाती है ताकि किसी भी इन-मेमोरी डेटा संरचनाएं खो जाएंगी, जिनमें "वैश्विक" दायरे से जुड़े हुए हैं। नामस्थान मुख्य जेएस सर्वर-साइड नेमस्पेस से अलग हैं इसलिए dbeval उन तक पहुंचने के लिए प्रतीत नहीं होता है (या, कम से कम, मुझे नहीं पता कि कहां देखना है)। अंतिम लेकिन कम से कम नहीं, हालांकि सभी डेटाबेस ऑब्जेक्ट्स और फ़ंक्शंस मौजूद हैं, 10gen उनके उपयोग को रोकने के लिए त्रुटि संदेशों को उत्पन्न कर रहा है (उदाहरण के लिए, coll.insert फ़ंक्शन नहीं होने पर typeof coll.insert === 'function'true है।

स्पष्ट होने के लिए, मुझे एक नोड में विकास के लिए ऐसा करने में दिलचस्पी है, क्योंकि मोंगोडीबी में लॉगिंग/डिबगिंग समर्थन काफी सीमित है। इस प्रकार के दुष्प्रभाव उत्पादन वातावरण में अच्छे नहीं हैं।

Answer 1

अनुमान के अनुसार, यह संभव नहीं है (जैसा कि मोंगोडीबी 2.2 में) मानचित्र/कम कार्यों के भीतर से किसी अन्य डीबी तक पहुंचने के लिए संभव नहीं है। संभावित प्रदर्शन प्रभाव के अलावा, डेडलॉक्स और अन्य अवांछित साइड इफेक्ट्स बनाने की भी संभावना है।

दुर्भाग्य से यह print() को "बैंड ऑफ आउट" विकल्प के रूप में मोंगो लॉग में छोड़ देता है।

अपने नैदानिक ​​उत्पादन के आधार पर, एक दृष्टिकोण की कोशिश करने का होगा:

• एक अनूठा मार्कर है कि आप लॉग उत्पादन में उत्पादन (या यहां तक ​​उत्पादन रन) की पहचान करने की अनुमति होगी जोड़ने

• अपने उत्पादन tojson() का उपयोग कर क्रमानुसार तो यह कुछ parseable संरचना के साथ लॉग इन और आदर्श एक पंक्ति पर उत्सर्जित जब आप print()

• करने के लिए एक पटकथा लिखने हैअपने अद्वितीय मार्कर के साथ मिलान लाइनों के लिए लॉग इन करें और रिपोर्टिंग

कि एक एम/आर समारोह के भीतर से चलेंगे कोड का उदाहरण के लिए एक और संग्रह में उन सम्मिलित mongod.log:

var diag = { 
    'run' : diagrun, 
    'phase': 'map', 
    'key' : z 
} 
print("MAPDIAG:" + tojson(diag)); 

उदाहरण आउटपुट:

$ tail -f mongo.log | grep "^MAPDIAG" 
MAPDIAG:{ "run" : "20120824", "phase" : "map", "key" : "dog" } 
MAPDIAG:{ "run" : "20120824", "phase" : "map", "key" : "cat" } 
MAPDIAG:{ "run" : "20120824", "phase" : "map", "key" : "cat" } 
MAPDIAG:{ "run" : "20120824", "phase" : "map", "key" : "mouse" } 
MAPDIAG:{ "run" : "20120824", "phase" : "map", "key" : "cat" } 
MAPDIAG:{ "run" : "20120824", "phase" : "map", "key" : "dog" } 
MAPDIAG:{ "run" : "20120824", "phase" : "reduce", "key" : "cat", "total" : 3 } 
MAPDIAG:{ "run" : "20120824", "phase" : "reduce", "key" : "dog", "total" : 2 }