Chat GPT, 어디까지 써봤니?
서비스

Chat GPT, 어디까지 써봤니?

요즘 IT업계에서 가장 핫한 Chat GPT, 어떻게 활용할 수 있을까? 핵클이 Chat GPT를 활용하는 법

Jen
,
Data Scientist
January 31, 2023
콘텐츠 공유

Chat GPT에게 물었다,

A/B테스트 결과를 해석하고 winner group을 추천할 수 있냐고 

Intro 

안녕하세요. 핵클의 Data Scientist Jen 입니다. 

테슬라의 일론 머스크와 Y-Combinator의 샘 알트만이 설립한 세계 최대 인공지능 연구소인 ‘OpenAI’가 지난해 11월 대화형 인공지능 ChatGPT의 연구용 프리버전을 공개하였습니다. 

ChatGPT는 공개 후 5일 만에 이용자가 100만 명을 돌파하며 돌풍을 일으켰습니다.

프리버전 사용기가 담긴 유튜브 영상과  기사들이 쏟아져 나오고 있고, 영국의 일간지 ‘인디펜던트'에는 “구글은 끝났다. (Google is done)”는 도발적인 기사가 게재되기도 하였습니다.

언론, 학계, SNS 등 에서 ChatGPT에 의해 개발자, 데이터 분석가, 카피라이터 등 다양한 직군이 대체될 수 있다는 평가까지 나오고 있는 상황입니다. 이런 입소문을 타고타고 사용자가 너무 몰려 종종 다운이 될 정도 입니다. 

Chat GPT 첫 화면
Chat GPT에 대한 뜨거운 반응

ChatGPT가 무엇을 할 수 있는데 이렇게들 호들갑 일까요? 궁금하지 않나요? 

음~ 이미 시 짓기, 작문, 글 요약, 그림 그리기, 코딩, 수학계산 같은 기능은 널리 알려져 있습니다.

이런 뻔한 기능에 대한 이야기라면 제가 글을 쓰지 않았을거랍니다.

저만 영원히 혼자 알고 싶은 정보인,  ChatGPT의 숨겨진 역량 “숫자를 읽고 해석까지” 가능하다는 사실은 알려드리려고 합니다. 

Chat GPT 시계열 데이터를 이해하고 인사이트를 찾을 수 있다? 없다?  “있다 🙆”

3주 (2023/01/09~2023/01/29) 동안의 DAU 데이터를 주고, ChatGPT에게 인사이트를 찾아 달라 요청을 했습니다.

Chat GPT A/B 테스트 결과를 해석 할 수 있다? 없다?  “있다 🙆” 

특정 실험의 구매 전환율 목표를 Chat GPT에게 제공하고, 실험 결과 해석을 요청해 보았습니다.  

Chat GPT A/B 테스트 결과를 활용해 winner group 까지 선택할 수 있다? 없다?  당연히  “있다 🙆” 입니다. 

6일 경과된 한 실험의 성공 목표, 가드레일 목표, 보조 목표를 Chat GPT에게 이번에는 한글로 제공하고 winner group 추천을 요청해 보았습니다. 

한글로 질문을 하고 답변을 받아본 결과, 제법 괜찮은 이유로 winner group을 선정해주는 것을 확인할 수 있습니다. 그런데 뭔가 아쉽지요? 그래서 영문으로 같은 질문을 해보았습니다.

크~ 역시나 보조 지표도 의사결정 할 때 고려해야 한다고 꼼꼼하게 집어줍니다.

아직 Chat GPT가 한국어보다는 영어가 편해서 그런 것 인지, 한국어 학습 데이터를 과묵한 한국인이 만들어 준 것인지 영어로 질문할 때 좀 더 풍부한 인사이틀 제공해주는 것까지 확인할 수 있었습니다.

Chat GPT 비지니스에서 어떻게 활용하면 좋을까요? 

생성 AI의 대표주자 ChatGPT의 데이터 읽고 해석하는 실력 어떻게 보셨나요?

전 솔직히 매우 놀랐답니다. 아직은 묻는 말에만 대답을 하고 팩트위주의 답변이라고 폄하할 수 있지만, ChatGPT는 질문의 맥락을 명확히 이해하고 답변 합니다.

그리고 답변을 반복적으로 재생성할 수도 있는데 그 결과를 보면 일관된 답변을 제공합니다. 뿐만 아니라 모든 input data를 빠짐없이 보고 답변을 생성합니다. 

제가 전 직장에 있을 때, 데이터분석가로써 일년에 연 평균 150+개의 실험을 맡아 분석을 하고, Launch Review Committee 일원으로 수 많은 A/B 실험을 리뷰하고 winner group을 선정하면서 인간의 편향이 개입되어 의사결정을 하는 경우, 실험이 복잡할 수록 많은 지표를 설정하는데 특정 지표를 의도적으로 숨기거나 의사결정시 빼먹는 실수를 심심치 않게 볼 수 있었습니다. 

아직까지 ChatGPT 재미 있네, 별로네, 구글 망하겠다 등 핫한 이야기 소재로만 생각하고 있지는 않나요? 

혹은 일자리를 빼앗길까 걱정을 하고 있나요?

이제 우리는 인간으로서 ChatGPT를 인간의 부족한 영역을 채워줄수 있는 동료로 비지니스에서 어떻게 받아들이고 활용 할지에 대해 진지하게 고민해야 하는 시기라고 생각합니다. 

이에 핵클은 기업들이 데이터 기반의 의사결정을 통해 빠르고 안정적으로 성장을 가속화 하는데 필요한 최고의 AI 기반 애자일 SaaS 플랫폼을 만드는 기업으로써 발빠르게 고민하고 있습니다. 이번에 선보이는 Hackle AI (Beta) 서비스를 통해 AI가 데이터 해석을 넘어, 실험의 결과를 예측하고, 프러덕트 개선 포인트를 제안할 수 있는 학습형 모델로 성장하는데 많은 시간을 단축시켜 줄 수 있을거라고 기대합니다.

그 결과 핵클의 핵심 서비스인 A/B 테스트에서 ChatGPT를 활용해 실험 결과를 요약하고, winner group을 추천해주는 Hackle AI (Beta) 를 곧 선보입니다. Hackle을 통해 누구보다 먼저 AI 동료를 맞이해 보세요. 

[핵클 AI (Beta) 론칭!]

A/B테스트를 하면서 이런 어려움을 겪었던 분이라면?
Chat GPT를 활용해 1분안에 지표를 해석하고 결론을 도출해주는 핵클AI로 해결해보세요!
📌[Beta] 핵클 AI 체험 신청   

혜택1. 무료로 핵클 AI 체험
혜택2. 실제 진행했던 A/B테스트의 결과지표에 대한 해석
혜택3. 핵클AI와 핵클의 15년차 데이터 사이언티스트의 해석본, 총 2종 제공

지금 바로 신청하세요!(선착순 마감)

신청링크  👉  http://bit.ly/3DrFke2

트위터에 공유하기
제품 주도 성장에 필요한 모든 기능을
All-in-One 플랫폼 핵클과 함께 시작해보세요!
무료 체험 시작하기
콘텐츠 공유
인터뷰에 나온 회사처럼,
빠르게 성장하고 싶다면 핵클과 함께 하세요!
핵클 드림팀 신청하기

성장의 시작, 핵클이 함께합니다!

비대면 바우처를 통해 70% 할인된 금액으로 핵클을 시작해보세요.
자세히 알아보기

👀 이런 콘텐츠는 어때요?