क्यों परीक्षण UX और प्रतिधारण महत्वपूर्ण है
एक मजबूत उत्पाद न केवल "विशेषताएं" हैं, बल्कि सभी समझने योग्य अनुभव और वापसी से ऊपर है। UX इस बात के लिए जिम्मेदार है कि उपयोगकर्ता कितनी जल्दी मूल्य (aha-पल) प्राप्त करता है, प्रतिधारण इस लिए जिम्मेदार है कि क्या वह फिर से इस UX और प्रतिधारण का सिस्टम परीक्षण अनुमान को परीक्षण योग्य परिकल्पनाओं में बदल देता है और सीधे ARPU/LTV को प्रभावित करता है। नीचे एक व्यावहारिक गाइड है: क्या मापना है, कैसे परीक्षण करना है और किस जाल को बाईपास करना है।
1) आधार: "अच्छा यूएक्स" और "प्रतिधारण" क्या है
UX (उपयोगकर्ता eXperience): मूल्य के लिए समय और घर्षण: स्पष्ट नेविगेशन, समझने योग्य ग्रंथ, पहुंच, "अंधेरे पैटर्न" की कमी।
प्रतिधारण - उपयोगकर्ताओं का अनुपात जो D1/D7/D30 (या सप्ताह तक) और "सक्रिय प्रतिधारण" पर लौट आए हैं - लक्ष्य गतिविधि के साथ वापसी (उदाहरण के लिए, शर्त, इन-गेम सत्र, खरीद)।
यह क्यों मायने रखता है:1. UX ऑनबोर्डिंग चरण के दौरान CAC नुकसान को कम करता है।
2. प्रतिधारण बजट को "बाद" के बिना एलटीवी बढ़ ता है।
3. दोनों संकेतक "कॉस्मेटिक" रिलीज़ के खिलाफ बीमा हैं जो व्यावसायिक प्रभाव नहीं देते हैं।
2) मेट्रिक्स फ्रेमवर्क
नॉर्थ स्टार मेट्रिक (NSM): एक मान मीट्रिक (उदाहरण के लिए, "पूर्ण लक्ष्य सत्र/खाता/सप्ताह की संख्या")।
हृदय: प्रसन्नता (CSAT/NPS), सगाई (आवृत्ति/अवधि), दत्तक ग्रहण (नया सक्रिय), प्रतिधारण (रिटर्न), कार्य सफलता (त्रुटियां/समय/रूपांतरण)।
AARRR: अधिग्रहण → सक्रियण → प्रतिधारण → राजस्व → रेफरल।
गार्ड: क्रैश/एएनआर, शिकायत, गति, आरजी/नैतिकता (कोई "डार्क पैटर्न"), पहुंच (WCAG)।
3) टेलीमेट्री: डिफ़ॉल्ट रूप से क्या लॉग करें
ऑनबोर्डिंग: स्वागत स्क्रीन देखना, ट्यूटोरियल, CCM/प्रोफाइल को पूरा करना, पहला कुंजी अधिनियम (FTUE/FTB/FTD)।
नेविगेशन/खोज: मेनू क्लिक, रिक्त परिणाम, बैकट्रैक, वांछित स्क्रीन का समय।
महत्वपूर्ण रास्ते: कंस्ट्रक्टर (बेट बिल्डर/बास्केट असेंबली), डिजाइन, कैशआउट/भुगतान।
सत्र: लंबाई, आवृत्ति, दिन की खिड़कियां, "रात" सत्र।
त्रुटियां/विलंबता: प्रमुख एपीआई, टाइमआउट, बार-बार क्लिक (घर्षण का संकेत) द्वारा p95/99।
डब्ल्यूजी/एथिक्स: इसमें सीमाएं शामिल हैं, "रियलिटी चेक", ऑप्ट-आउट प्रोमो।
4) यूएक्स रिसर्च: गुणात्मक तरीके
उपयोगिता परीक्षण (प्रति परिदृश्य 5-8 उत्तरदाता): हम जोर से सोचते हैं, "मॉडल विफलताओं" को रिकॉर्ड करते हैं (जहां एक व्यक्ति समझ नहीं पाता है कि आगे क्या करना है)।
कार्ड/हीटमैप/स्क्रॉलिंग नक्शे पर क्लिक करें: क्या अनदेखा किया गया है, कहां "अंधे धब्बे" हैं।
डायरी अनुसंधान/JTBD साक्षात्कार: "उपयोगकर्ता उत्पाद को किराए पर लेता है?"
सेरेवेई: सीईएस (आसानी), सीसैट (संतुष्टि), एनपीएस (सिफारिश)।
पहुँच योग्यता: कंट्रास्ट, फ़ॉन्ट आकार, फ़ोकस, नेविगेशन बिना माउस/ध्वनि के जाँच कर रहा है.
5) प्रयोग: परिकल्पनाओं का परीक्षण कैसे करें
A/B परीक्षण: एक चर - एक तुलना। न्यूनतम शक्ति (शक्ति ≥ 0। 8), एक पूर्व निर्धारित अवधि, और एक मीट्रिक।
मल्टी-बार और फैक्टर परीक्षण: जब आपको कई विकल्पों (आइकन, ग्रंथ, चरण क्रम) की तुलना करने की आवश्यकता होती है।
कैनरी रिलीज/छाया: तकनीक के लिए यातायात के एक छोटे से हिस्से पर चलाएं।
Cohort परीक्षण: विचरण में कमी के लिए दीर्घकालिक प्रतिधारण (W1/W4/W8), CUPED का मूल्यांकन।
Ficheflags: बिना रिलीज के इंस्टेंट ऑफ/ऑन।
सांख्यिकी (संक्षिप्त): नमूना आकार (z _ {ć/2} + z _ {}}) ^ 2 cdot 2/· Delta ^ 2), जहां ( ) न्यूनतम महत्वपूर्ण प्रभाव है। अंशों के लिए - द्विपद अनुमानों/विल्सन का उपयोग करें, समय के लिए - गैर-पैरामीट्रिक परीक्षण (मान-व्हिटनी)।
6) कोहॉर्ट विश्लेषण: सही तरीके से पढ़ें
प्रतिधारण वक्र: लक्ष्य "गिरना और शेल्फ को स्थिर करना" है, न कि "शून्य से फिसलना।"
चिपचिपा कारक: DAU/MAU (सही 0। 2–0. डोमेन के आधार पर 6)।
: D1 विकास के बिना विकास "चीनी" (गलत प्रेरणा, बहुत आक्रामक बोनस) का संकेत है।
खंड: यातायात स्रोत, मंच, देश, प्रवेश के घंटे - विभिन्न प्रतिधारण प्रोफाइल के लिए अलग-अलग यूएक्स समाधान की आवश्यकता होती है।
7) विशिष्ट यूएक्स बाधाएं और त्वरित सुधार
मान के लिए लंबा रास्ता: छोटा कदम, गोंद स्क्रीन, "डिफ़ॉल्ट स्मार्ट" दें।
अस्पष्ट ग्रंथ: उदाहरणों के साथ माइक्रो-कॉपीराइटिंग ("इसका क्या मतलब है? "), इनलाइन संकेत।
भीड़: द्वितीयक को साफ करें, खाली स्थान, बड़े सीटीए जोड़ें।
कमजोर प्रतिक्रिया: "लोड/सफल/त्रुटि" राज्यों, कंकाल स्क्रीन, स्थानीय टोस्ट।
लंबी गति: छवि/कैश अनुकूलन, debunks, अनुरोध कतारें।
खराब खोज/फ़िल्टर: स्वतः पूर्णता, अंतिम प्रश्न, सहेजे गए फ़िल्टर.
8) प्रतिधारण: वास्तव में क्या रिटर्न बढ़ा
पुन: प्रवेश परिदृश्य: पचाएं "आपके लिए क्या नया है", एक अधूरी कार्रवाई (बिना दबाव) की याद दिलाता है।
प्रगति और निजीकरण: "मौके से जारी रखें", पिछले व्यवहार के लिए सिफारिशें।
घटनाओं का कैलेंडर: वापसी के कारण (घटनाओं/मौसमों/लाइव घटनाओं) + दृश्यमान योजना।
ऑन-साइट प्रशिक्षण: कार्रवाई के लिए सूक्ष्म-ट्यूटोरियल, "अप्रयुक्त" अवसरों को उजागर करना।
संचार: आवृत्ति कैप, प्रासंगिकता> आवृत्ति, प्रकाश ऑप्ट-आउट के साथ ई-मेल/पुश/मैसेंजर।
ईमानदार यांत्रिकी: "डार्क पैटर्न" और घुसपैठ करने वाले टाइमर के बिना - यह अल्पावधि में क्लिक उठाएगा, लेकिन एनपीएस और दीर्घकालिक प्रतिधारण को मार देगा।
9) गार्ड: चोट कैसे नहीं लगी
टेक: क्रैश/एएनआर, p95 विलंबता, भुगतान त्रुटियां।
नैतिकता/आरजी: "दौड़" को उत्तेजित न करें, समय/धन सीमा उपलब्ध रखें, रात में मौन का सम्मान करें।
ग्राहक का अनुभव: शिकायतें/सदस्यता/कम स्कोर - प्रयोग को रोकने के लिए एक लाल रेखा।
10) व्यावहारिक मामले (सरलीकृत)
केस "ओनबोर्डिंग 2 चरणों से छोटा है": पहली प्रमुख कार्रवाई तक − 25% समय, D1 ↑ 4 पीपी द्वारा, D7 अपरिवर्तित → एक लंबे ट्यूटोरियल के बजाय "2 दिन पर" संकेत जोड़ा।
केस "खाली खोज परिणाम": "समान प्रश्न" और "अंतिम पाया -" खोज से कार्रवाई + 12% तक रूपांतरण, शिकायतें 30%।
केस "फ्लफ ऑन शेड्यूल": इवेंट और ब्याज के साथ "हर शाम" को बदल दिया - "डी 7 रिटेंशन + 2 प्रतिशत अंक, 40% को समाप्त करता है।
11) यूएक्स/रिटेंशन प्रोग्राम लॉन्च चेकलिस्ट
इंस्ट्रूमेंटेशन
- ईवेंट स्कीमा: ऑनबोर्डिंग, कुंजी पथ, त्रुटियां, गति।
- डैशबोर्ड: FTUE, स्टेज रूपांतरण, D1/D7/D30, DAU/WAU/MAU, चिपचिपा कारक।
- एट्रिब्यूशन/सेगमेंट: चैनल, प्लेटफ़ॉर्म, देश, संस्करण।
शोध
- 3 प्रमुख परिदृश्यों में उपयोगिता सत्र।
- JTBD साक्षात्कार; नियमित सीईएस/सीसैट/एनपीएस सर्वेक्षण।
- एक्सेसिबिलिटी ऑडिट (कंट्रास्ट, टैब नेविगेशन, वैकल्पिक पाठ)।
प्रयोग
- परिकल्पना रजिस्ट्री (ICE/PIE प्राथमिकता)।
- Ficheflags, कैनरी, A/B पैटर्न, बिजली योजना।
- गार्ड और रोक मानदंड।
संचालन
- cohort और UX ऋण द्वारा "रेट्रो साप्ताहिक" का अनुष्ठान।
- SLA के साथ UX ऋण बैकलॉग।
- संचार नीति (आवृत्ति/शांत घंटे/ऑप्ट-आउट)।
12) गलतियाँ जो सबसे आम हैं
मान के "बदले" पर क्लिक करें. वैनिटी मैट्रिक्स - उत्पाद लाभ।- एक बार में एक दर्जन चीजें बदलें। यह स्पष्ट नहीं है कि क्या काम किया।
- मामूली घर्षण की अनदेखी। दूसरे से दूसरे - और अब − 10% रूपांतरण।
- "पी-वैल्यू द्वारा जीतें। "प्रभाव और प्रतिधारण को देखें, न कि केवल सांख्यिकीय महत्व।
- ड्राइव रिटेंशन प्रमोशन। D1 ऊपर जाता है, D30 नीचे चला जाता है - आप मीठे हो जाते हैं, UX में सुधार नहीं होता है।
13) फॉर्मूला मिनी धोखा शीट
t-day cohort प्रतिधारण: (R_t = é frac {é text {active on day} t} {é text {day 0}} पर सेट)।
DAU/MAU: चिपचिपाहट ≈ DAU/MAU।
भिन्न p द्वारा A/B के लिए नमूना आकार: (n łautx· frac {2 p (1-p) (z_{α/2}+z_{β}) ^ 2} {łDelta ^ 2}).
CUPED सुधार: (Y ^ = Y - theta (X - é bar {X}), जहां (X) पूर्व-परीक्षण सहसंयोजक है।
UX और प्रतिधारण परीक्षण एक अनुशासन है जो अनुसंधान, विश्लेषण और प्रयोग को जोड़ ता है। जीतने वाली टीम है:
1. स्पष्ट रूप से मूल्य (NSM) को आर्टिकुलेट करता है और टेलीमेट्री, 2 डालता है। नियमित रूप से मनुष्यों में स्क्रिप्ट का परीक्षण करें, 3। रेलिंग के साथ साफ ए/बीएस चलाता है, 4। कोहोर्ट्स पढ़ ता है, न कि "औसत", 5। उपयोगकर्ता का सम्मान करता है, "अंधेरे पैटर्न" से बचता है।
यह है कि आप रूपांतरण को कैसे बढ़ाते हैं, दीर्घकालिक प्रतिधारण में वृद्धि करते हैं और परिणामस्वरूप - एलटीवी, उत्पाद में विश्वास का त्याग किए बिना।