परमाणु रूप से एक टेबल से दूसरे टेबल पर पंक्तियों को कैसे स्थानांतरित करें?

Question

मैं कई हज़ार सेंसर से रीडिंग एकत्र कर रहा हूं और उन्हें एक MySQL डेटाबेस में संग्रहीत कर रहा हूं। प्रति सेकंड कई सौ आवेषण हैं। सम्मिलित प्रदर्शन को बेहतर बनाने के लिए मैं शुरुआत में मानों को एक मेमरी बफर तालिका में संग्रहीत कर रहा हूं। एक बार एक मिनट में मैं एक संग्रहीत प्रक्रिया चलाता हूं जो मेमोरी बफर से स्थायी तालिका में डाली गई पंक्तियों को स्थानांतरित करता है।

मूल रूप से मैं अस्थायी बफर से पंक्तियों को स्थानांतरित करने के लिए अपने संग्रहीत प्रक्रिया में निम्नलिखित करना चाहते हैं: क्योंकि डेटा संग्रह की प्रक्रिया "data_buffer" में अतिरिक्त पंक्तियां सम्मिलित

INSERT INTO data SELECT * FROM data_buffer; 
DELETE FROM data_buffer; 

दुर्भाग्य से पिछले प्रयोग करने योग्य नहीं है INSERT के बीच और ऊपर हटाना। इस प्रकार उन पंक्तियों को "डेटा" तालिका में डाले बिना हटा दिया जाएगा।

मैं ऑपरेशन परमाणु कैसे बना सकता हूं या केवल पंक्तियों को हटाने के लिए डिलीट स्टेटमेंट बना सकता हूं जो पिछले कथन में चुने गए थे और इनसेरेट किए गए थे?

मैं इसे मानक तरीके से करना पसंद करूंगा जो संभवतः विभिन्न डेटाबेस इंजनों पर काम करता है।

मैं प्रदर्शन ओवरहेड और स्टोरेज आवश्यकताओं के कारण कोई अतिरिक्त "आईडी" कॉलम नहीं जोड़ना पसंद करूंगा।

काश SELECT_AND_DELETE या मानक SQL या कुछ इसी तरह में ले जाने के बयान था ...

Answer 1

एक संभव तरीके से उन सभी समस्याओं से बचने के लिए, और भी तेजी से रहने के लिए, दो data_buffer तालिकाओं का उपयोग करने के लिए होगा (उन्हें data_buffer1 और data_buffer2 कॉल); जबकि संग्रह प्रक्रिया data_buffer2 में डालें, आप insert और deletedata_buffer2 पर कर सकते हैं; स्विच करने से, इसलिए एकत्रित डेटा data_buffer2 में जाता है, जबकि डेटा डाला जाता है + data_buffer1 से data में हटा दिया गया है।

Answer 2

मेरा मानना ​​है कि यह काम करेगा, लेकिन जब तक डालने

SET TRANSACTION ISOLATION LEVEL SERIALIZABLE; 
BEGIN TRANSACTION; 
INSERT INTO data (SELECT * FROM data_buffer FOR UPDATE); 
DELETE FROM data_buffer; 
COMMIT TRANSACTION; 

Answer 3

किया जाता है को अवरुद्ध कर देगा मुझे लगता है तालिकाओं समान हैं , एक ही कॉलम और प्राथमिक कुंजी के साथ? अगर ऐसा है, तो आप बसे एक जहां खंड के अंदर का चयन कर सकता है ... कुछ इस तरह:

DELETE FROM data_buffer 
WHERE primarykey IN (SELECT primarykey FROM data) 

Answer 4

रिकॉर्ड कैसे एक पंक्ति आईडी होने के बारे में,, सम्मिलित होने से पहले अधिकतम मूल्य प्राप्त डालने और फिर हटाना < = अधिकतम (आईडी)

Answer 5

यह @ ammoQ के उत्तर का एक समान समाधान है। अंतर यह है कि INSERTING प्रक्रिया को रखने के बजाय कौन सी तालिका लिखना है, आप निर्धारित प्रक्रिया में तालिकाओं को पारदर्शी रूप से स्वैप कर सकते हैं।

उपयोग अनुसूचित प्रक्रिया में नाम बदलने टेबल स्वैप करने के लिए:

CREATE TABLE IF NOT EXISTS data_buffer_new LIKE data_buffer; 
RENAME TABLE data_buffer TO data_buffer_old, data_buffer_new TO data_buffer; 
INSERT INTO data SELECT * FROM data_buffer_old; 
DROP TABLE data_buffer_old; 

यह काम करता है क्योंकि RENAME बयान टेबल atomically अदला-बदली, इस प्रकार डालने प्रक्रियाओं के साथ "तालिका नहीं मिला" असफल नहीं होंगे। हालांकि यह MySQL विशिष्ट है।

Answer 6

यह एक MySQL विशिष्ट समाधान है। जब आप पंक्तियों को स्थानांतरित करते हैं तो नई पंक्तियों को जोड़ने से INSERTING प्रक्रियाओं को रोकने के लिए आप लॉकिंग का उपयोग कर सकते हैं।

प्रक्रिया है जो चाल पंक्तियों इस प्रकार होना चाहिए:

LOCK TABLE data_buffer READ; 
INSERT INTO data SELECT * FROM data_buffer; 
DELETE FROM data_buffer; 
UNLOCK TABLE; 

कोड जो आवेषण बफर में नई पंक्तियाँ इस प्रकार बदला जाना चाहिए:

LOCK TABLE data_buffer WRITE; 
INSERT INTO data_buffer VALUES (1, 2, 3); 
UNLOCK TABLE; 

सम्मिलित प्रक्रिया होगा स्पष्ट रूप से ब्लॉक जबकि ताला जगह में है।