Search
🔫

A/B Test

날짜
2025/05/27
파트
기획/디자인
서기
블로그 업로드 여부

실험 세팅

Table
Search
실험 세팅
이름
텍스트
랜덤한 50 : 50
대조군: A 비교군: B

실험 이유

문제: 사용자가 사용하지 않는 기능을 활성화 하기 위한 방안
1.
물품 링크 바로가기 유도
2.
채팅방 채팅 참여 유도
3.
채팅방 참여자 목록 확인 기능 참여 유도

실험 UI

실험 전/후를 알 수 있는 UI

실험 1

A vs B 조건:
물품 링크 색상에 따른 바로가기
A: 공구 상세 화면 바로가기 검은색
B: 공구 상세 화면 바로가기(메인컬러)

실험 2

A vs B 조건:
채팅방 메시지 전송 플레이스 홀더 메시지
A: “메시지를 입력하세요.”
B: “총대에게 궁금한 점을 물어보세요.”

실험 3

A vs B 조건:
채팅방 참여자 목록 아이콘 : more_comment_detail_options_event
A: 기존 햄버거 아이콘
B: 새로운 아이콘

실험 준비

Table
Search
이름
텍스트
실험1. 바로가기 링크는 메인 컬러일 경우 클릭 수가 많을 것이다. 실험 2. 채팅방 메시지 플레이스 홀더 메시지를 부드럽게 변경하면 채팅 참여 수가 많을 것이다. 실험 3. 채팅방 햄버거 아이콘을 변경하면 참여자 목록 확인 수가 많을 것이다.
GA 지표 분석 실험 1. click product link A / click product link B 실험 2. send message A / send message B 실험 3. click participants A / click participants B
GA 이벤트, AB 테스트 유저 정보 API, 화면 변경 후 릴리즈

실험 결과

[실험1: 공구 디테일 바로가기 링크 컬러]
바로가기 링크의 색상에 따른 클릭 수 차이를 실험한 결과, 메인 컬러 사용 시 클릭 수가 약 2.4배 증가하였다.
(검정색: 62회 → 메인 컬러: 157회)
메인 컬러가 사용자에게 클릭 가능한 요소라는 점을 더 직관적으로 전달한다는 것을 확인할 수 있다.
[실험2: 채팅방 메시지 전송 플레이스 홀더 메시지]
채팅 입력창의 플레이스홀더 문구를 변경한 결과, 메시지 전송 수가 2배 증가하였다.
(기존 문구: 78회 → 개선 문구: 156회)
이는 단순한 안내 문구보다 총대에게 질문을 유도하는 문구가 참여자의 메시지 전송을 자연스럽게 유도함을 보여준다.
[실험3: 채팅방 참여자 목록 아이콘]
채팅방 참여자 목록 아이콘을 변경하였을 때, 클릭 수가 2.5배 증가하였습니다.
기존 ui는 90 이벤트, 새로운 ui는 224 이벤트로 2.5배의 차이를 보였습니다.

참고 자료