हास्केल

Question

में बड़ी फ़ाइलों के साथ काम मैं की सुविधा देता है सिर्फ इतना कहना, 4 बाइट तैरता की एक बड़ी फ़ाइल (4 gigs) है,। मैं इसे सूची के रूप में देखना चाहता हूं, इस अर्थ में कि मैं मानचित्र, फ़िल्टर, फोल्ड इत्यादि का उपयोग करने में सक्षम होना चाहता हूं। हालांकि, आउटपुट के साथ एक नई सूची बनाने के बजाय, मैं आउटपुट को वापस लिखना चाहता हूं फ़ाइल, और इस प्रकार केवल स्मृति में फ़ाइल का एक छोटा सा हिस्सा लोड करना होगा। आप कह सकते हैं कि मैं एक प्रकार किसी को भी इस स्थिति से पहले में भाग गया है MutableFileList

कहा जाता है क्या? पहिया का पुन: आविष्कार करने के बजाय मैं सोच रहा था कि इससे निपटने के लिए हैकिश तरीका है या नहीं?

Answer 1

आप mmap का उपयोग स्मृति करने के लिए फ़ाइल को मैप करने के सकता है और उसके बाद इसे संसाधित। mmap module है जो read and write mmaped files का वादा करता है और फ़ाइलों के आलसी मैप किए गए हिस्सों के साथ भी काम कर सकता है, लेकिन मैंने कोशिश नहीं की है।

मैप किए गए फ़ाइल को लिखने के लिए इंटरफ़ेस काफी कम स्तर लगता है, इसलिए आपको Foreign.Ptr और इसी तरह के साथ अपना खुद का सार बनाना होगा या काम करना होगा।

Answer 2

This आप के लिए काफी मददगार होना चाहिए। आपको readFile और writeFile का उपयोग करने के लिए जो कुछ करना है, उसका उपयोग कर सकते हैं, और सबकुछ आलसी हो गया है। यह केवल तब भी चीजों को स्मृति में रखता है जब उनका उपयोग किया जा रहा है, ताकि आप अपने कंप्यूटर को उड़ाए बिना फ़ाइल को पढ़, संसाधित और लिख सकें।

Answer 3

आप एक [Double] या स्मृति में [Float] के रूप में यह इलाज नहीं करना चाहिए। आप क्या कर सकते हैं सूची में पैक किए गए सरणी प्रकारों में से एक का उपयोग करें, जैसे यूवेक्टर/वेक्टर/... एमएमएफ़फाइल या रीडफाइल के साथ कंपनी में एक समय में फ़ाइल के हिस्सों को खींचने के लिए, और उन्हें संसाधित करें। या आलसी पैक किए गए सरणी प्रकार का उपयोग करें, आलसी बाइटस्टेरिंग के बराबर।