पाइथन स्क्रिप्ट निर्देशिका में सभी फ़ाइलों को एक फ़ाइल में

Question

में जोड़ने के लिए मैंने निर्देशिका में सभी फ़ाइलों को एक फ़ाइल में संयोजित करने के लिए निम्न स्क्रिप्ट लिखी है।

import time, glob 

outfilename = 'all_' + str((int(time.time()))) + ".txt" 

filenames = glob.glob('*.txt') 

with open(outfilename, 'wb') as outfile: 
    for fname in filenames: 
     with open(fname, 'r') as readfile: 
      infile = readfile.read() 
      for line in infile: 
       outfile.write(line) 
      outfile.write("\n\n") 

Answer 1

उपयोग shutil.copyfileobj:

import shutil 

with open(outfilename, 'wb') as outfile: 
    for filename in glob.glob('*.txt'): 
     if filename == outfilename: 
      # don't want to copy the output into the output 
      continue 
     with open(filename, 'rb') as readfile: 
      shutil.copyfileobj(readfile, outfile) 

shutil, मात्रा में readfile वस्तु से पढ़ता है उन्हें outfile fileobject के लिए लिख सीधे। readline() या पुनरावृत्ति बफर का उपयोग न करें, क्योंकि आपको लाइन एंडिंग खोजने के ऊपरी हिस्से की आवश्यकता नहीं है।

पढ़ने और लिखने दोनों के लिए एक ही मोड का उपयोग करें; पायथन 3 का उपयोग करते समय यह विशेष रूप से महत्वपूर्ण है; मैंने दोनों के लिए बाइनरी मोड का उपयोग किया है।

Answer 2

आप अधिक पुनरावृति कर सकते हैं:

इस

1. मुहावरेदार अजगर के मामले में अनुकूलित किया जा सकता है,

2. समय

यहाँ टुकड़ा है एल सीधे किसी फ़ाइल वस्तु की Ines, स्मृति में पूरी बात पढ़ने के बिना: डेटा की प्रतिलिपि

with open(fname, 'r') as readfile: 
    for line in readfile: 
     outfile.write(line) 

Answer 3

कई चरों का उपयोग करने की आवश्यकता नहीं है।

with open(outfilename, 'w') as outfile: 
    for fname in filenames: 
     with open(fname, 'r') as readfile: 
      outfile.write(readfile.read() + "\n\n") 

Answer 4

fileinput मॉड्यूल एक से अधिक फ़ाइलों

से अधिक पुनरावृति के लिए एक प्राकृतिक तरीका प्रदान करता है

for line in fileinput.input(glob.glob("*.txt")): 
    outfile.write(line) 

Answer 5

अजगर 2.7 का उपयोग करना, मैंने किया था कुछ "बेंचमार्क" बनाम

shutil.copyfileobj(readfile, outfile) 

outfile.write(infile.read()) 

के परीक्षण

मैंने ~ 2.6 जीबी के संयुक्त फ़ाइल आकार के साथ 63 एमबी से 313 एमबी के आकार में 20 .txt फ़ाइलों को दोहराया। दोनों तरीकों से, सामान्य रीड मोड बाइनरी रीड मोड से बेहतर प्रदर्शन करता है और shutil.copyfileobj आमतौर पर outfile.write से तेज़ था।

जब सबसे अच्छा संयोजन के साथ सबसे खराब संयोजन (outfile.write, द्विआधारी मोड) (shutil.copyfileobj, सामान्य पढ़ने मोड) की तुलना, अंतर काफी महत्वपूर्ण था:

outfile.write, binary mode: 43 seconds, on average. 

shutil.copyfileobj, normal mode: 27 seconds, on average. 

outfile एक अंतिम आकार था सामान्य पढ़ने मोड में 2620 एमबी की बाइनरी रीड मोड में 2578 एमबी बनाम।