우리가 기능을 출시하고, 개선하고, 시스템 안전성을 강화하기 위해 끊임 없이 고민하는 이유는 무엇일까요?
개별 개발 프로젝트 단위로는 플랫폼 안정성 강화, 생산성 확대, 비즈니스 신기능 출시, 오퍼레이션 서포트 등 다양한 목적이 있겠지만, 이 모든 과정은 결국 유저들의 서비스 이용 만족도를 향상시켜 궁극적으로는 매출 등 비즈니스 수익성을 극대화하기 위함입니다.
기능을 출시했다가 비즈니스 지표에 부정적인 영향을 미쳤다는 이유로 갑자기 롤백을 하게 되거나, 정식 출시 전 임팩트 확인을 위해 A/B 테스트를 진행해 보신 경험이 있으실 겁니다.
많은 기능의 출시와 개선이 처음부터 특정 비즈니스 지표를 개선하기 위한 목적으로 설계 되는데, 목표했던 지표 개선이 보이지 않거나 오히려 안 좋은 영향이 확인된다면 투입된 리소스와 비용, 시간 등을 손해 보더라도 더 큰 손실을 막기 위해 출시를 할 수 없는 것이지요.
그만큼 기능의 출시에 있어 비즈니스 지표는 중요 합니다. 그래서 많은 팀들이 정식 출시 전에 비즈니스 지표에 미치는 영향도를 확인하고자 기능 플래그와 A/B 테스트를 병행하여 활용하고 있죠.
기능 플래그에서 비즈니스 지표 분석까지 가능하도록 만든 것인데요.
소속 조직에서 구매 전환율, 가입률, 체류시간, PV/UV, 구매자수 등 다양한 비즈니스 지표들을 모니터 하실 겁니다.
핵클의 A/B 테스트에 모니터링 필요한 지표를 셋팅하듯이, 기능 플래그 상태 대시보드의 [데이터 분석] 탭에 지표를 설정해 놓으면 기능을 미출시 했을 때(False) 대비 출시했을 때(True) 해당 비즈니스 지표의 개선율을 확인하실 수 있습니다.
핵클 기능 플래그는 설정해놓은 비즈니스 지표에 출시 기능이 미치는 영향도까지 계산해서 보여주기 때문에 기능을 출시하기 전에 지표 영향도를 먼저 확인하고 출시 의사결정을 내릴 수 있습니다.
대시보드 상단에는 각 비즈니스 지표의 False 대비 True 에서의 개선율을 그래프로 보여주어 한눈에 지표의 변화를 읽을 수 있게 해드립니다.
정확한 수치를 확인하고 싶다면 하단의 지표 분석 결과를 참고하시면 되는데, 분석 결과와 개선율, 그리고 신뢰구간까지 보여주기 때문에 보다 객관적인 시각에서 빠르게 의사결정이 가능해 집니다.
💡지표 분석까지 가능한 핵클 기능 플래그, 사용해보고 싶다면?
대시보드 바로가기 👉
.png)
