load, stress और soak testing में क्या फर्क है, और आप क्या नापेंगे?

load testing उम्मीद के मुताबिक traffic चलाकर पक्का करती है कि सिस्टम अपने लक्ष्य पूरे करता है। stress testing क्षमता से आगे धकेलकर टूटने का बिंदु ढूंढती है और देखती है कि वह ढहने की जगह संभलकर गिरता है या नहीं। soak testing घंटों तक लगातार मध्यम load चलाकर leaks और संसाधन खत्म होना उजागर करती है। नापिए latency के percentiles, throughput, error rate, और CPU, memory, connections तथा database का saturation।

इनका फर्क मंशा का है। load testing यह जवाब देती है कि उम्मीद के traffic पर सिस्टम अपना लक्ष्य पूरा करता है या नहीं, तो शुरू करने से पहले मुझे वह लक्ष्य तय चाहिए, कुछ ऐसा कि दो हजार एक साथ users पर p95 तीन सौ milliseconds से नीचे और error rate एक प्रतिशत के दसवें हिस्से से कम। stress testing जानबूझकर उससे आगे जाती है ताकि पता चले कि वह कहां टूटता है और उससे भी जरूरी, कैसे टूटता है। queuing और साफ errors के साथ संभलकर गिरना मंजूर है; data का बिगड़ना या ऐसा सिलसिला जो पड़ोसी services को भी ले डूबे, मंजूर नहीं। soak testing आठ या बारह घंटे तक मध्यम load चलाती है, जो धीमे leaks, कभी वापस न लौटने वाले connection pools, और disk भर देने वाले log की मात्रा पकड़ने का इकलौता तरीका है। मैंने एक बार ऐसा memory leak पकड़ा जो करीब छह घंटे बाद ही दिखा और तीस मिनट की run में कभी सामने नहीं आता। नापने पर मैं percentiles बताता हूं, क्योंकि औसत हर उस चीज को छिपा देता है जो मायने रखती है, तो p50, p95 और p99 के साथ throughput और error rate। और मैं साथ ही saturation देखता हूं, यानी CPU, memory, connection pool का इस्तेमाल, और database locks, क्योंकि response time बताता है कि कुछ गलत है और saturation बताता है कि क्या।