mmap vs fileinput

Question

के फायदे मैंने पढ़ा है कि mmap fileinput से फायदेमंद है, क्योंकि यह कर्नेल पेज कैश में एक पृष्ठ पढ़ेगा और पेज को उपयोगकर्ता पता स्थान में साझा करेगा। जबकि, fileinput वास्तव में एक पृष्ठ को कर्नेल में लाता है और उपयोगकर्ता पता स्थान पर एक पंक्ति की प्रतिलिपि बनाता है। तो, fileinput के साथ यह अतिरिक्त अंतरिक्ष ओवरहेड है।

तो, मैं mmap में जाने की योजना बना रहा हूं, लेकिन मैं उन्नत पायथन हैकर से जानना चाहता हूं कि यह प्रदर्शन में सुधार करता है या नहीं?

यदि हां, तो क्या फ़ाइलपूट का एक समान कार्यान्वयन है जो mmap का उपयोग करता है?

यदि आप जानते हैं तो कृपया मुझे किसी भी ओपनसोर्स कोड पर इंगित करें।

धन्यवाद

Answer 1

mmap एक फ़ाइल लेता है और रैम में यह चिपक ताकि आप बाइट्स की एक सरणी की तरह या एक बड़ा डेटा संरचना के रूप में सूचकांक यह कर सकते हैं कि।

यदि आप अपनी फ़ाइल को "यादृच्छिक-पहुंच" तरीके से एक्सेस कर रहे हैं तो यह बहुत तेज़ है - यह बहुत से fseek(), fread(), fwrite() संयोजन कर रहा है।

लेकिन यदि आप फ़ाइल को केवल एक बार (कहें) में फ़ाइल पढ़ रहे हैं और प्रोसेस कर रहे हैं, तो यह काफी तेज़ी से होने की संभावना नहीं है। असल में, किसी भी उचित फ़ाइल आकार के लिए (एमएमएपी के साथ याद रखें, यह सब रैम में फिट होना चाहिए - या पेजिंग होता है जो एमएमएपी की दक्षता को कम करने के लिए शुरू होता है) यह शायद अलग नहीं है।