데이터 분석/방법론6 [A/B 테스트] A/B테스트 설계부터 결과 분석까지 이전 포스팅에서는, A/B테스트에 대한 검증 과정만 다뤘었는데 이번 포스팅에서는 A/B테스트의 구체적인 목적부터 설계까지의 전 프로세스를 담아볼려고 한다. 1. A/B 테스트는 왜 하는 것일까? 실제 사례를 바탕으로 알아보자 래는 넷플릭스의 A/B 테스트 예시이다. 기존의 A화면과 , 유저가 원하는 모습대로 개편한 B의 테스트 화면이다. 사용자는 B를 원한다고 말하지만 사실 상 매출을 올려주는 화면은 가입률을 증가 시킨 A였던 것이었다. 이처럼 A/B 테스트는 정량적인 데이터를 바탕으로 평가하기 때문에, 의사결정자의 직관 혹은 사용자의 말에 의존하는 것보다 시간 및 비용 낭비에 대한 위험성이 적다. 또한 효과를 눈으로 검증할 수 있기 때문에 이미 여러 기업에서 새로운 기능을 평가하고 디자인을 개선하여 인.. 데이터 분석/방법론 2023. 5. 26. [데이터 분석] 데이터 분석 실무 용어 정리 CTR (Click-through-rate) -버튼 클릭 건수 / 홈페이지 접속 건수 -PV 전환율을 사용하는 케이스 PV (Page View) -페이지 뷰 -페이지가 표시된 횟수 -PV가 높다는 것은 홈페이지에 둘러볼 콘텐츠가 많다는 것 -여러 개의 팝업창을 띄우거나 UI가 너무 복잡해 특정 컨텐츠를 이용하기 위해서 어쩔 수 없이 여러 페이지를 거쳐서 이용할 때도 높아질 수 있음 CPC (Cost Per Click) -클릭 1번당 비용 CPM (Cost Per Mile) -1000번 노출 당 비용 CPA (Cost Per Action) -내가 원하는 사용자의 액션(회원가입,설치)을 하게 하는데 사용된 비용 CTP(Click-through-probabilty) -클릭한 Unique 사용자의 수 / 홈페이.. 데이터 분석/방법론 2022. 12. 20. [데이터 분석] 로그 데이터란? ✔️로그란 ? - 연속적인 데이터의 기록 , 즉 서비스나 시스템 가동 시 발생되는 이벤트의 기록- 보통의 우리가 보는 데이터는 행,열 형태로 되어있는 RDB지만, 로그 데이터는 JSON, CSV, TSV와 같은 비정형 텍스트로 들어온다. ✔️로그 데이터의 분석 게임분야에 대해 로그 데이터를 분석한 글이 있어 대신 첨부한다. https://datadoctorblog.com/2022/03/24/Py-Preprocessing-user-root-log/ Py) 전처리 - 게임 로그데이터 처리아이템 획득과 관련된 사용자의 게임 로그 데이터를 정제하는 예시를 알아본다.datadoctorblog.com해당 글을 읽어보면, 로그는 분석하는 것도 중요하지만 설계하는 것 또한 중요함을 느낄 수 있다. 필수 로그를 빠뜨리.. 데이터 분석/방법론 2022. 12. 16. [AARRR] AARRR이란 무엇일까? AARRR 해적지표 ✔️ AARRR :by 데이브 맥클루어 (미국의 스타트업 엑셀러레이터인 500 Startups의 설립자) : 시장 진입 단계에 맞는 특정 지표를 기준으로 우리 서비스의 상태를 가늠할 수 있는 효율적인 기준 : 수많은 데이터 중 현 시점에서 가장 핵심적인 지표에 집중할 수 있게 함 Acquisiton (사용자 유입) : 고객은 어떻게 처음 우리 서비스를 접하는지? Activation (사용자 활성화) : 고객이 서비스를 처음 이용할 때, 긍정적인 경험을 제공하는지 ? Retention (사용자 유지) : 고객이 서비스를 재사용하는지? Referral (추천) : 고객이 자발적으로 다른 이에게 서비스는 추천하는지? Revenue (매출) : 매출로 이어지는지? *각 지표 사이의 상관 관게.. 데이터 분석/방법론 2022. 11. 10. [코호트 분석] 코호트 분석(Cohort Analysis)이란? 코호트 분석 (Cohort Analysis) ✔️ 코호트 분석 : 코호트 분석은 분석 전에 데이터 세트의 데이터를 관련 그룹으로 나누는 일종의 행동 분석. 이러한 그룹 또는 코호트는 일반적으로 정의된 시간 범위 내에서 공통된 특성이나 경험을 공유 (위키백과) 쉽게 풀어서, '특정 기간에 특정 특성/경험을 공유하는 사용자 집단'이 코호트이며, 이를 분석하는 것이 코호트 분석이다. **세그먼트와의 차이점 : 세그먼트는 전체 고객을 '특정 기준'으로 나눈 것이고, 코호트는 '동일한 기간'에 '동일한 특성'을 가진 사람들을 분류하는 것으로, 코호트는 세그먼트와 달리 '기간'이라는 개념이 포함 ✔️ 예시 : 성별 코호트 , 연령 코호트 , 가입 주차 코호트 등등 ✔️ 왜? 유저들의 행동 관찰과 이해가 가능하고, .. 데이터 분석/방법론 2022. 11. 1. [A/B 테스트] A/B테스트와 파이썬 예제 ✔️A/B테스트란 무엇일까? A/B 테스트(버킷 테스트 또는 분할-실행 테스트)란 , 마케팅과 웹 분석에서 사용하는 방법으로, 대조 실험이라고 할 수 있다. 상황을 하나 예로 들어보도록 하자. 한 서비스의 참여자를 모집함에 있어 카카오톡 배너로 광고를 실행하는데 참여만 해도 경품 100% 증정과 , 참여자 모집 이라는 두가지 문구로 나누어 광고를 집행하였다. 과연 어떤 문구가 사람들의 구미를 당겼을까? 이걸 알아보는 것이 바로 A/B테스트 인 것이다. ✔️왜 A/B테스트를 하는걸까? 이유는 정의에서도 볼 수 있듯이, 최적의 고객 경험을 제공 ✔️설계는 어떻게 하는걸까? A/B테스트의 가장 큰 목적은 '전환'이다. A라는 원본을 B라는 대안으로 바꾸어 지표X를 상승시켜야 한다. https://www.ora.. 데이터 분석/방법론 2022. 9. 8. 이전 1 다음