본문 바로가기

통계 찔금찔끔3

A/B Test 시리즈(2) - 애자일하게 A/B Test 진행하는 법 🚩 프로그래머스 실리콘밸리에서 날아온 A/B테스트 올인원 키트를 수강하고 일부 정리한 내용입니다. 많은 회사에서는 A/B Test 실험을 애자일하게 진행하는 것이 큰 과제라고 합니다. 그렇다면 애자일하게 하는 실험은 어떤 것을 뜻할까요? 1. A/B Test란 무엇인가 간략하게 설명하면, 서비스의 유저를 임의로 두 집단으로 나누고, 기존버전과 테스트 버전(여러개)을 비교하여 평가하는 방법입니다. A/B Test 시리즈 1편에서 실제 활용사례를 확인할 수 있어요 : ) 👉🏻 A/B Test 가 필요한 이유 비지니스 관련 지표를 개선되는 지 객관적으로 측정하기 위함 위험을 최소화 하기 위함 사용자 설문 등이 좋아도 실제 반응을 예측할 수 없음 (거짓 설문) 처음에는 작은 퍼센트의 사용자들에게만 새 기능을 노.. 2024. 2. 18.
A/B Test 간단하게 직접 실험해보기!! *실패기록 (VWO과 함께, 구글 옵티마이즈 종료) 원래는 구글 옵티마이즈를 활용하여 진행해보고 싶었으나, ga, 구글태그매니저 이것저것 다 세팅해두었지만⋯ 이럴수가 23년 9월 부로 종료되었다고 합니다... (엉엉 이럴수가! 이래서 항상 기회를 잡아야한다😖) 하지만 12월까지 꼭 진행해보고 싶었던 주제이기 때문에 활용가능한 다른 플랫폼들을 찾아왔어요. VWO 활용하기로! 30일간 무료이기 때문에 알차게 사용해야합니다. https://vwo.com/ 12월 글또에서 진행한 소모임의 월간 메이커스에서 해당 내용을 진행해보았답니다. ❣️ 미리 결과 말씀드리면 대차게 실패했습니다❣️ 왜 실패했을까요? 궁금하시죠? (사실 뭐가 없긴 하지만요⋯) 그래도 기록겸 남기기로 하였답니다. 우선 A/B Test 기능을 지원해주는 VWO를 사용하러갑니다. A/B Test가 .. 2024. 1. 20.
A/B Test 시리즈 (1) - A/B Test 개념, 지표 찍먹하기 A/B Test 시리즈의 첫번째 문서입니다! 해당 시리즈에서 A/B Test를 계획하고 실행하는 법, 테스트 및 정보들을 해석하는 방법 등의 내용들을 다룰 예정입니다. 1. A/B Test 살펴보기 1-1. A/B Test 를 하는 이유 기업에서 기존의 시스템을 개선하거나 새로운 시도를 할 때 성과를 어떻게 측정할 수 있을 까요? 가장 직관적이고 확실한 방법은 AS-IS와 TO-BE의 결과를 직접 비교하는 것입니다. 혹은 임의로 두 집단으로 나눠서 서로 다른 콘텐츠를 보여준 다음 어떤 집단이 더 높은 성과를 보이는 지를 비교할 수 있습니다. 어떠한 결과를 얻었을 때, 그 원인을 명확하게 두는 인과추론 적으로 가장 쉽게 접근할 수 있습니다. 따라서 인과추론으로 접근할 수 있는 가장 쉬운 방법인 A/B Te.. 2023. 12. 10.