테스트 UX 및 보존이 중요한 이유
강력한 제품은 "기능" 일뿐만 아니라 무엇보다도 이해할 수있는 경험과 수익입니다. UX는 사용자가 가치 (aha-moment) 를 얼마나 빨리 달성하는지, 보존은이 값으로 다시 돌아 오는지 여부를 담당합니다. UX 및 보존에 대한 시스템 테스트는 추측을 테스트 가능한 가설로 바꾸고 ARPU/LTV에 직접 영향을 미칩니다. 아래는 실용적인 안내서입니다: 측정 대상, 테스트 방법 및 우회 대상 트랩.
1) 기본: "좋은 UX" 및 "유지"
UX (사용자 eXperience): 가치에 대한 시간과 마찰: 명확한 탐색, 이해할 수있는 텍스트, 접근성, "어두운 패턴" 부족.
보존 - D1/D7/D30 (또는 주별) 및 "활성 보존" 으로 돌아온 사용자의 비율 - 대상 활동을 통한 반환 (예: 베팅, 게임 내 세션, 구매).
중요한 이유:1. UX는 온 보딩 단계에서 CAC 손실을 줄입니다.
2. 예산을 "애프터 버닝" 하지 않고 LTV를 유지합니다.
3. 두 지표 모두 비즈니스 효과를주지 않는 "화장품" 릴리스에 대한 보험입니다.
2) 메트릭 프레임 워크
NSM (North Star Metric): 하나의 값 메트릭 (예: "완료된 대상 세션/계정/주 수").
심장: 행복 (CSAT/NPS), 약혼 (빈도/지속 시간), 입양 (새로운 활성), 유지 (반환), 작업 성공 (오류/시간/변환).
AARRR: 획득 → 활성화 → 유지 → 수익 → 추천.
가드 레일: 충돌/ANR, 불만, 속도, RG/윤리 ("어두운 패턴" 없음), 접근성 (WCAG).
3) 원격 측정: 기본적으로 기록해야 할 사항
온 보딩: 환영 화면을보고 튜토리얼, CCM/프로파일, 첫 번째 주요 행위 (FTUI/FTB/FTD) 를 완료합니다.
탐색/검색: 메뉴 클릭, 빈 결과, 백 트랙, 원하는 화면까지의 시간.
중요한 경로: 생성자 (Bet Builder/basket 어셈블리), 설계, 현금 인출/지불.
세션: 길이, 빈도, 주간 창, "야간" 세션.
오류/대기 시간: 주요 API, 타임 아웃, 반복 클릭 (마찰의 표시) 별 p95/99.
WG/윤리: 한계, "현실 점검", 옵트 아웃 프로모션 포함.
4) UX 연구: 질적 방법
사용성 테스트 (시나리오 당 5-8 명의 응답자): "모델 실패" (사람이 다음에해야 할 일을 이해하지 못하는 경우) 를 크게 기록합니다.
클릭 카드/히트 맵/스크롤 맵: 무시되는 것, "사각 지대" 는 어디에 있습니까?
일기 연구/JTBD 인터뷰: "사용자는 어떤 일을해야합니까?"
Serevei: CES (쉬움), CSAT (만족), NPS (권장 사항).
접근성: 대비, 글꼴 크기, 초점, 마우스/사운드없이 탐색.
5) 실험: 가설을 테스트하는 방법
A/B 테스트: 하나의 변수-하나의 비교. 최소 전력 (전력 0 이상) 8), 미리 정해진 지속 시간 및 메트릭.
멀티 바 및 팩터 테스트: 여러 옵션 (아이콘, 텍스트, 단계 순서) 을 비교해야 할 때.
카나리아 릴리스/섀도우: 기술을위한 트래픽의 작은 부분에서 실행됩니다.
코호트 테스트: 분산 감소를위한 CUPED (W1/W4/W8) 장기 유지 평가.
Ficheflags: 출시없이 즉시 꺼짐.
통계 (간략한 설명): 표본 크기 약 (z _ {α/2} + z _ {β}) ² 2\cdot 2 자리에 있습니다. 여기서 (따라서) 는 최소 중요한 효과입니다. 분수의 경우-시간 동안 이항 추정치/윌슨을 사용하십시오-비모수 테스트 (Mann-Whitney).
6) 코호트 분석: 올바르게 읽기
보존 곡선: 목표는 "0으로 미끄러지는 것" 이 아니라 "떨어지고 안정화 된 선반" 입니다.
끈적 끈적한 요소: DAU/MAU (완벽한 0. 2–0. 도메인에 따라 6).
활성화 → 유지: D7/D30 성장이없는 D1 성장은 "설탕" (잘못된 동기 부여, 너무 공격적인 보너스) 의 징후입니다.
세그먼트: 트래픽 소스, 플랫폼, 국가, 입국 시간-보존 프로파일마다 다른 UX 솔루션이 필요합니다.
7) 전형적인 UX 장벽 및 빠른 수정
가치에 대한 긴 경로: 단계 단축, 접착제 화면, "기본 스마트" 제공.
불분명 한 텍스트: 예제가있는 마이크로 카피 라이팅 ("무엇을 의미합니까? "), 인라인 힌트.
혼잡: 2 차를 정리하고 빈 공간과 큰 CTA를 추가하십시오.
약한 피드백: "부하/성공/오류" 상태, 골격 화면, 로컬 토스트.
긴 속도: 이미지/캐시 최적화, debunks, 요청 대기열.
나쁜 검색/필터: 자동 완료, 마지막 쿼리, 필터 저장.
8) 유지: 실제로 수익을 증가시키는 것
재진입 시나리오: "새로운 것" 을 소화하고 미완성 된 행동 (압력없이) 을 상기시킵니다.
진보와 개인화: "현장에서 계속", 과거 행동에 대한 권장 사항.
이벤트 일정: 반환 이유 (이벤트/시즌/라이브 이벤트) + 가시적 인 계획.
현장 교육: 미사용 기회를 "강조" 하는 행동을위한 마이크로 튜토리얼.
통신: 주파수 한도, 관련성> 주파수, 광 옵트 아웃이있는 전자 메일/푸시/메신저.
정직한 역학: "어두운 패턴" 과 침입 타이머가없는 경우 단기적으로 클릭이 발생하지만 NPS 및 장기 유지가 중단됩니다.
9) Guardrails: 다 치지 않는 방법
기술: 충돌/ANR, p95 대기 시간, 지불 오류.
윤리/RG: "인종" 을 자극하지 말고 시간/돈 한도를 유지하고 밤에는 침묵을 존중하십시오.
고객 경험: 불만/구독/낮은 점수-실험을 중지하기위한 빨간 선.
10) 실제 사례 (단순화)
"온보드의 경우 2 단계 단축": 첫 번째 주요 작업까지의 시간의 -25%, D1 JP의 4 pp, D7의 변경되지 않은 → 는 긴 튜토리얼 대신 "2 일째" 힌트를 추가했습니다.
사례 "빈 검색 결과": 검색에서 행동 + 12%, 불만 -30% 로 "유사한 쿼리" 및 "마지막으로 찾은 →" 변환이 추가되었습니다.
사례 "일정에 따른 Fluff": "매일 저녁" 을 "이벤트 및이자 →" D7 보유 + 2% 포인트로 대체하여 -40% 를 구독하지 않습니다.
11) UX/보존 프로그램 출시 점검표
계측
- 이벤트 스키마: 온 보딩, 주요 경로, 오류, 속도.
- 대시 보드: FTUI, 스테이지 변환, D1/D7/D30, DAU/WAU/MAU, 스티커 팩터.
- 기고/세그먼트: 채널, 플랫폼, 국가, 버전.
연구
- 3 가지 주요 시나리오의 유용성 세션.
- JTBD 인터뷰; 일반 CES/CSAT/NPS 설문 조사.
- 접근성 감사 (대비, 탭 탐색, 대체 텍스트).
실험
- 가설 레지스트리 (ICE/PIE 우선 순위).
- Ficheflags, 카나리아, A/B 패턴, 전력 계획.
- 가드 레일 및 중지 기준.
작업
코호트와 UX 부채에 의한 "매주 복고풍" 의 의식.
- SLA와의 UX 부채 잔고.
- 통신 정책 (주파수/조용한 시간/옵트 아웃).
12) 가장 흔한 실수
가치를 "대신" 클릭하십시오. 허영심 측정 값은 제품 이점입니다.
한 번에 12 가지를 변경하십시오. 무엇이 효과가 있었는지 확실하지 않습
약간의 마찰을 무시합니다. 두 번째에서 두 번째 - 그리고 현재 -10% 변환.
p- 값으로 승리하십시오. "통계적 유의성뿐만 아니라 효과와 유지도보십시오.
드라이브 유지 프로모션. D1이 올라가고 D30이 내려갑니다. 개선 된 UX는 아닙니다.
13) 포뮬러 미니 치트 시트
t-day 코호트 보존: (R _ t =\frac {\tex는 낮에 활성화되어 있습니다} t} {\test는 0}} 에 설정됨).
DAU/MAU: 끈적 끈적한 DAU/MAU.
분수 p에 의하여 A/B의 샘플 크기: (n\axx\frac {2 p (1-p) (z _ {α/2} + z _ {β}) ² 2} {\Delta ² 2}).
CUPED 수정: (Y ² = Y-\theta (X-\bar {X})), 여기서 (X) 는 사전 테스트 공변량입니다.
UX 및 보존 테스트는 연구, 분석 및 실험을 연결하는 분야입니다. 이기는 팀은 다음과 같습니다
1. 가치 (NSM) 를 명확하게 표현하고 원격 측정을 수행합니다. 정기적으로 인간의 스크립트를 테스트합니 가드 레일로 깔끔한 A/B를 실행합니다. "평균" 이 아닌 코호트를 읽습니다 .5. "어두운 패턴" 을 피하면서 사용자를 존중합니다.
이것이 제품에 대한 자신감을 희생시키지 않으면 서 전환을 늘리고 장기 유지를 늘리며 결과적으로 LTV를 높이는 방법입니다.