2024.06.27 canary, AB test

 

bliki: Canary Release

 

매일 배포하는 팀이 되는 여정(2) — Feature Toggle 활용하기

 

당근 피쳐 토글 글을 보다가..

피쳐 카나리 피쳐 토글로 A/B 테스트를 할 수 있다.

A/B 테스트를 하는 방법으로는 카나리 배포도 있다.

다만 A/B 테스트와 카나리 배포를 동일시하면 안 된다고 한다.

카나리 배포는 롤백과 문제 감지를 위한 배포방법이지 A/B테스트를 통해 유의미한 데이터를 얻는 목적이 아니기 때문이다.

그럼 A/B 테스트를 구축하는 방법으로는 무엇이 있을까.

밑의 글들을 보면 결국 어플리케이션에서 사용자를 판단하고 데이터를 쌓는 것이다.

따로 서버를 구축한 것 같지는 않다.

데이터를 어떻게 쌓고 활용할지에 대한 내용이 많다. 

 

 

굉장히 많은 회사들이 사용하고 있다. 이쯤 되면 안 하는 회사가 더 이상한 거 아닐까?

 

오늘의 집

오늘의집 A/B 실험 플랫폼 구축기 - 오늘의집 블로그

 

 

 

우형의 ab테스트

 

실험과 기능플래그를 위한 실험플랫폼 구축하기 | 우아한형제들 기술블로그

 

 

쿠팡의 ab테스트

 

대규모 A/B 테스트의 인시던트를 최소화하다

 

쿠팡의 A/B 테스트 지표 연산

 

롯데

 

롯데ON의 추천 Dynamic A/B Testing 구축 및 운영기

 

카카오페이

 

카카오페이만의 AB 테스트 서비스를 만든 이유 | 카카오페이 기술 블로그