क्षैतिज डेटाबेस स्केलिंग

Question

मैं एक PostgreSQL डेटाबेस जो इस संरचना है के साथ एक रूबी ऑन रेल्स अनुप्रयोग है:

class A < ActiveRecord::Base 
    has_many :B 
end 
class B < ActiveRecord::Base 
    has_many :C 
end 
class C < ActiveRecord::Base 
    attr_accessible :x, :y :z 
end 

केवल हैं कुछ एक के, और वे धीरे धीरे बढ़ता है (जैसे कि 5 एक महीने) । प्रत्येक ए में हजारों बी हैं, और प्रत्येक बी में हजारों सी है (इसलिए प्रत्येक ए में लाखों सी हैं)।

ए स्वतंत्र हैं और अलग-अलग ए की बी और सी के साथ कभी भी आवश्यकता नहीं होगी (यानी एक ही प्रश्न में)।

मेरी समस्या यह है कि अब मेरे पास केवल कुछ जोड़े हैं, ActiveRecord प्रश्नों में काफी लंबा समय लगता है। जब सी के लिए तालिका में लाखों पंक्तियां होती हैं, तो प्रश्न हमेशा के लिए लेते हैं।

मैं क्षैतिज डेटाबेस को स्केल करने के बारे में सोच रहा हूं (यानी ए के लिए एक टेबल, बी की एक तालिका और प्रत्येक ए के लिए सी की एक तालिका)। लेकिन मुझे नहीं पता कि यह कैसे करना है। यह मुझे लगता है कि यह एक प्रकार का शेरिंग है, लेकिन मैं यह नहीं समझ सकता कि डीबी टेबल को गतिशील रूप से कैसे बनाया जाए और डेटा तक पहुंचने के लिए ActiveRecord का उपयोग करें यदि टेबल निर्भर करता है कि किस ए के साथ काम कर रहा है।

बहुत बहुत धन्यवाद।

Answer 1

यदि आपके पास केवल कुछ पंक्तियों के साथ प्रदर्शन चिंताएं हैं, या यहां तक ​​कि कई मिलियन पंक्तियों के साथ, आपको वायुमंडल अभियंता को समाधान देने से पहले एक कदम वापस लेने की आवश्यकता है। जिस समस्या का आप वर्णन कर रहे हैं वह अनुक्रमण द्वारा बहुत आसानी से सुलझाया जाता है; अतिरिक्त भौतिक तालिकाओं को बनाने का कोई फायदा नहीं है और आप अविश्वसनीय जटिलता पेश करेंगे।

जैसा कि @ mu-is-too-short पहले से ही कहा गया है: अपनी क्वेरी योजनाओं पर ध्यान दें। प्रदर्शन का विश्लेषण करने के लिए अपने टूल्स का प्रयोग करें।

कहा जा रहा है कि आप table partitioning का उपयोग शारीरिक रूप से और पारदर्शी रूप से डेटा के भंडारण को अलग-अलग sharded तालिकाओं में घर पर रख सकते हैं जो विशेष रूप से डेटा के लिए उपयोगी होता है जो बहुत तेजी से बढ़ता है लेकिन केवल एक दिए गए समय बॉक्स (एक महीने की तरह) में उपयोगी होता है। आप तेजी से भंडारण (जैसे एसएसडी की RAID) पर सक्रिय रिकॉर्ड रखते हुए पुराने धीमे भंडारण (कहते हैं, कताई जंग के मानक RAID) पर पुरानी या हटाए गए रिकॉर्ड को शटल करने के लिए एक संग्रह बिट फ्लैग कॉलम के साथ भी ऐसा कर सकते हैं।

Answer 2

तो ऐसा लगता है कि आपके पास पेड़ जैसी संरचना है। यदि उन्हें किसी प्रकार के क्रॉस-रेफरेंस तरीके से डेटाबेस से बाहर खींचने की ज़रूरत नहीं है, तो आपके ए के पास "दस्तावेज़" के गुण हैं, मोंगोडीबी पर एक नज़र डालें। ए को उनके सभी बी के साथ सहेजा जाएगा और सी एक ही रिकॉर्ड में होगा।

http://www.mongodb.org/

आप देख रहे हैं एक ORM के लिए, जाँच

http://mongoid.org/en/mongoid/index.html