Experiments · Case 05
페이 영역 개인화·넛지 실험
더보기탭의 페이 영역은 제휴사가 운영하지만, 화면이 앱 안에 고정돼 있어 빠르게 실험하기 어려웠습니다. 방문자 일부를 제휴사 실험군으로 떼어 직접 실험하게 하되, 사용자에게 보이는 화면의 기준은 더보기탭 디자인 가이드로 지키는 구조를 만들었습니다. 두 실험의 결과를 정식 스펙에 반영했고, 화면을 크게 덮는 실험안에는 우려를 내 보류했습니다.
Problem
방문자의 상당수에게 페이 영역은 비어 있었다
방문자의 20% 정도가 페이 미가입자였고, 이들에게는 잔액 0원만 보였습니다. 자산 메뉴로 들어가는 비율도 낮았습니다. 제휴사가 개선하고 싶어도, 화면이 앱에 고정돼 있어 실험 속도가 나지 않았습니다.
Structure
제휴사가 실험하고, 화면 기준은 우리가 지킨다
방문자의 일부를 제휴사 실험군으로 고정해 1년간 자체 실험을 보장하고, 나머지는 더보기탭 실험과 서로 섞이지 않게 나눴습니다. 대신 화면 변경은 더보기탭 디자인 가이드를 기준으로 하기로 했고, 가이드와 넛지 패널·버튼 규칙을 만들어 제휴사 실험 화면을 검수했습니다.
Result
두 실험의 결과를 정식 스펙에 넣었다
| 실험 | 결과 · 대조군 대비 | 판정 |
|---|---|---|
| 자산 메뉴 개인화 (4안) | 추천 모델 B안 클릭률 약 +49% | B안 채택 |
| 미가입자 전환 넛지 | 클릭률 약 +8% (오차 범위) | 정보 제공 가치로 채택 |
| 생일 혜택 넛지 | — | 보류 |
수치는 제휴사 공유 결과를 상대값으로 바꿔 적었습니다.
두 결과는 더보기탭 쪽 정식 스펙에 미리 반영했습니다. 넛지 패널은 문구와 버튼 글자 수를 제한하고, 영역 색을 유지해 테마 대응 범위를 좁혔습니다.
Decision
화면을 덮는 전환 패턴에는 우려를 냈다
생일을 앞둔 사용자에게 혜택을 크게 띄우는 실험안은 영역을 점유하고 미가입자에게 상시 노출되는 방식이었습니다. 단기 전환에는 유리하지만 사용자가 화면을 광고로 느낄 수 있다는 우려를 전했고, 챕터 리더와 논의해 우선 정식 적용한 넛지의 추이를 본 뒤 다크 패턴 없이 두 서비스의 시너지가 나는 방향으로 UX를 다시 정리하기로 했습니다.
My Role
실험 화면의 기준을 리드했다
리드한 것
- 페이 영역 디자인 가이드
- 넛지 패널·버튼 규칙
- 제휴사 실험 화면 검수
- 전환 패턴 우려 제기와 방향 정리
함께 한 것
- 실험 설계·집행 — 제휴사
- 실험군 분리 구조 — PM·개발
- 정식 스펙 — PM