किसी नए feature की सफलता का metric क्या होगा, यह आप कैसे तय करते हैं?

जो log करना आसान है वहां से नहीं, उस बर्ताव के बदलाव से शुरू कीजिए जिसकी आपको उम्मीद है। वह खास यूजर कार्रवाई बताइए जिसे feature को ज्यादा आम बनाना चाहिए, ऐसा metric चुनिए जो सिर्फ तभी हिले जब वह कार्रवाई हो, और उसके साथ एक guardrail metric रखिए जो कहीं और होने वाले नुकसान को पकड़े। फिर वह आंकड़ा लिख दीजिए जिस पर आप इसे नाकामी कहेंगे, launch के बाद नहीं, पहले।

मैं उस बर्ताव से शुरू करता हूं जिसे बदलने की मुझे उम्मीद है, और metric बनाने से पहले लिख देता हूं, क्योंकि launch के बाद हर कोई इस बारे में बहुत रचनात्मक हो जाता है कि सफलता किसे कहते हैं। तो जिस feature का मकसद लोगों से पहले ही दिन डेटा import करवाना है, उसका metric है नए accounts का वह हिस्सा जो अपने पहले session में import पूरा करता है, imports की संख्या नहीं, क्योंकि अगर हमारे सबसे भारी यूजर दो बार import कर लें तो संख्या तो बढ़ ही जाएगी। फिर मैं एक guardrail जोड़ता हूं। उसमें वह support ticket की मात्रा थी, क्योंकि खराब importer तब भी tickets पैदा करता है जब completion का आंकड़ा ठीक दिखता हो। और मैं नाकामी की लकीर साफ लिखता हूं: चार हफ्ते बाद किसी आंकड़े से नीचे रहा तो हम उस पर सुधार करने की जगह उसे वापस ले लेंगे। पूरा खेल इसी लिखे हुए में है, क्योंकि इससे launch की समीक्षा इस बहस की जगह कि दस प्रतिशत अच्छा था या नहीं, एक फैसला बन जाती है।