विजुअल स्टूडियो 2013 लोड परीक्षण

Question

साथ Specflow परिदृश्य का उपयोग कर सकते मैं वी.एस. लोड परीक्षण के लिए (वर्तमान में स्वीकृति और स्वचालित परीक्षण के लिए उपयोग कर रहा है) के रूप में अच्छी तरह से, दोहराव और अतिरिक्त काम से बचने के लिए मौजूदा Specflow परिदृश्यों पुन: उपयोग करने की योजना है। स्पीकफ्लो उन परीक्षणों के लिए ठीक काम करता है क्योंकि यह उन्हें एक बार चलाता है लेकिन लोड टेस्ट के संदर्भ में जब यह प्रत्येक स्पेकफ्लो परिदृश्य को एक से अधिक बार निष्पादित करता है और समानांतर यह मुद्दों और त्रुटियों में चलता है और उपयोगकर्ता की उच्च संख्या के साथ यह

ये त्रुटियां अंत में कुछ परीक्षण विफल हो सकते हैं जो अंत में गलत परीक्षण परिणाम बनाता है, उदाहरण के लिए एक स्पेकफ्लो परिदृश्य का उपयोग 20 उपयोगकर्ताओं के लोड टेस्ट और 2 मिनट की समय अवधि के साथ परीक्षण परिदृश्य के रूप में कर सकते हैं, जिससे 50 त्रुटियां नीचे की तरह हो सकती हैं। तो परीक्षण परिणाम से पता चलता है कि विशेष परिदृश्य 200 बार निष्पादित किया जाता है जहां 150 पास हुए और 50 विफल परीक्षण और विफलता Specflow त्रुटियों के कारण होती है। लोड टेस्ट के संदर्भ में यह परिणाम पूरी तरह से गलत और गलत है क्योंकि परीक्षण में समस्याएं हैं।

त्रुटि संदेश:

ScenarioTearDown threw exception. System.NullReferenceException: System.NullReferenceException: Object reference not set to an instance of an object. 
TechTalk.SpecFlow.Infrastructure.TestExecutionEngine.HandleBlockSwitch(ScenarioBlock block) 
TechTalk.SpecFlow.Infrastructure.TestExecutionEngine.ExecuteStep(StepInstance stepInstance) TechTalk.SpecFlow.Infrastructure.TestExecutionEngine.Step(StepDefinitionKeyword stepDefinitionKeyword, String keyword, String text, String multilineTextArg, Table tableArg) 
TechTalk.SpecFlow.TestRunner.Then(String text, String multilineTextArg, Table tableArg, String keyword) 

ऐसा लगता है कुछ जांच के बाद Specflow पैदा करते हैं और एक ही परिदृश्य समानांतर जो इस संघर्ष के कारण होता है और कुछ परीक्षण में विफल रहता है लेकिन मैं यह भी है कि के बारे में कुछ संदेह है और अगर वहाँ देखने के लिए मांग कर नहीं चल सकता इस बारे में कोई कामकाज या अगर मुझे कुछ याद आ रहा है और सोच रहा है कि क्या स्पीकफ्लो परिदृश्य लोड टेस्ट के लिए इस्तेमाल किया जा सकता है?

Answer 1

मैं समझता हूं कि लोड परीक्षण के लिए अपने परीक्षणों का पुन: उपयोग करना चाहते हैं (स्वयं को दोहराएं), हालांकि लोड परीक्षण में स्वीकृति परीक्षणों से बहुत अलग उद्देश्य है। लोड परीक्षणों को हर दिन उपयोग परिदृश्य यथार्थवादी लेना चाहिए, और उन पर उपयोगकर्ताओं की बढ़ती संख्या फेंकना चाहिए। इस कारण से मैं आपको आग्रह करता हूं कि आप अपने लोड परीक्षणों को अपनी स्वीकृति और स्वचालित परीक्षण से अलग रखें। वे वास्तव में विभिन्न चीजों का परीक्षण कर रहे हैं।

लोड परीक्षण हर दिन के परिदृश्यों के लिए अधिक उपयोग के तहत आवेदन के प्रदर्शन का परीक्षण करना चाहिए, और स्वीकृति और स्वचालित परीक्षण यकीन है कि ऐप्स विशेष के अनुसार कार्य कर रहा है बनाते हैं।

लोड परीक्षण एक सिस्टम या डिवाइस पर मांग डालने और इसकी प्रतिक्रिया को मापने की प्रक्रिया है। सामान्य और अनुमानित पीक लोड स्थितियों दोनों के तहत सिस्टम के व्यवहार को निर्धारित करने के लिए लोड परीक्षण किया जाता है। यह किसी एप्लिकेशन की अधिकतम ऑपरेटिंग क्षमता के साथ-साथ किसी भी बाधाओं की पहचान करने में सहायता करता है और यह निर्धारित करता है कि कौन सा तत्व गिरावट का कारण बन रहा है।

स्रोत: Wikipedia: Load testing

एक स्वीकृति परीक्षण एक सॉफ्टवेयर उत्पाद, आम तौर पर एक उदाहरण है या एक उपयोग परिदृश्य के रूप में व्यक्त के व्यवहार का औपचारिक वर्णन है। ... कई एजिल टीमों के लिए स्वीकृति परीक्षण कार्यात्मक विनिर्देश का मुख्य रूप है; कभी-कभी व्यावसायिक आवश्यकताओं की एकमात्र औपचारिक अभिव्यक्ति। अन्य मामलों में, वे केवल एक विशेष रूप से Agile तकनीक या औपचारिकता, जैसे मामलों का उपयोग या अधिक कथा दस्तावेजों के परिणामस्वरूप एक विनिर्देश दस्तावेज पूरक।

स्रोत: Agile Aliance: Acceptance Testing

वे अलग बातें हैं, इसलिए परीक्षण, और परीक्षण चौखटे, साथ ही विभिन्न होना चाहिए। लोड परीक्षणों के लिए एक अलग सूट रखकर आप वास्तव में "खुद को दोहराना" नहीं कर रहे हैं।

तकनीकी कारणों से यह असफल क्यों हो रहा है?SpecFlow, जब सामान्य विजुअल स्टूडियो परीक्षण धावक का उपयोग करते समय चलाया जाता है, तो समानांतर में परीक्षण चलाने के लिए नहीं बनाया गया था। समांतर परीक्षण धावक उपलब्ध हैं, लेकिन अधिकांश भुगतान सॉफ्टवेयर हैं।