A/B Test 4장 카드뉴스

두 가지 디자인·문구·기능을 동시에 운영하며 어느 쪽이 더 좋은 성과를 내는지 데이터로 비교하는 실험 방식으로, 1990년대 미국 IT 산업에서 시작되어 한국·미국 모든 대형 서비스의 표준 의사결정 도구입니다.

어떤 버튼 문구가 더 잘 눌릴까? '지금 시작하기' vs '무료로 체험하기'를 동시에 노출해 사용자 절반은 A, 절반은 B를 보게 한 뒤 클릭률을 비교합니다. Netflix·Amazon·토스·당근이 매일 수십 건의 A/B 테스트를 돌립니다. 한국에서는 토스가 '월 1,000개 실험'으로 유명합니다. AI 시대에는 ChatGPT API로 두 가지 답변 톤을 비교하는 'AI A/B 테스트'까지 등장했습니다.

[토스 · 월 1,000개 실험] 구분: 토스는 모든 신규 기능을 A/B 테스트로 출시 여부 결정. 수치: 토스 SLASH 2024 발표에 따르면 월 평균 1,000건 이상 실험 운영 {{src:토스 SLASH|https://toss.tech/slash-24}}. 결과: 데이터 기반 결정으로 출시 실패 비율 최소화. [Netflix · 추천 알고리즘] 구분: 추천 알고리즘 한 줄 변경도 A