[🏆HIT] 주모 키우기! - 테스트 결과 정리

[로망바드(kong1659)]

얘들아 안녕?

다들 진행 중인 프로젝트 개발은 잘 되어 가?

오늘은 지난 7월 2일에 진행을 부탁 했었던 테스트 결과를 공유해 볼까 해.

그다지 정보는 없지만, 그래도 비슷한 처지의 친구들에게 조금은 도움이 되는 부분이 있었으면 좋겠네.

아 그 전에 먼저, 시간 내서 테스트 진행해준 친구들 너무 고마워!

특히 댓글이나 이메일로 피드백 남겨준 것 하나하나가 엄청 도움이 됐어!

저번 테스트와는 다르게, 이번 테스트는 플레이 트래킹을 위해 파이어베이스 애널리틱스를 사용해봤어.

덕분에 이렇게 부족하게나마 테스트 결과를 확인하고, 공유할 수 있었던 것 같아.

자, 그럼 시작해보자.

몇 명이 플레이 했나?

테스트 기간은 총 4일(7. 2 ~ 7. 4)로, 모두 39명이 테스트에 참여해줬어.

파이어베이스의 first_open이라는 이벤트가 첫 실행이라길래, 해당 수치로 판단했지. (틀리면 말 해줘. 처음이라 잘 몰라 ㅎ)

테스트 종료하던 시점의 정확한 조회수는 기억 안 나지만, 대충 600 ~ 800정도가 아니었나 해.

그렇게 치면 조회수 대비 5~6% 정도의 친구들이 테스트에 참여해 준거야.

아마 Apk 설치가 아닌 구글 플레이에서 다운로드를 받게 했으면 설치 비율이 더 높아지지 않았을까 생각해. (편하니까)

번거로움을 무릅쓰고 플레이 해 준 친구들 다시 한번 고마워!

리텐션, 리텐션을 보자!

지표 쪽을 잘 모르지만, 제일 중요한 게 리텐션(재접속율)이라는 건 어디서 주워들은 적이 있지.

그래서 제일 먼저 리텐션을 확인해봤어.

테스트가 4일이라 데이터도 4일까지 밖에 없어 ㅎ

사실 개발 일지를 꾸준히 적고 있었고, 테스트 인원도 작아서 데이터의 신뢰성은 거의 없다고 봐야 될 것 같아.

그래도 아예 깜깜이보단 낫고, 재미도 있을 것 같아서 한 번 정리를 해봤어.

먼저 1일차 리텐션은 38.5%로, 신뢰성을 떠나 단순히 수치만 봤을 땐 나쁘지 않다고 생각해. (구글 서치 ㅇㅇ)

설치 한 다음 날에 게임을 실행했다는 건 게임에 대한 인상이 나쁘지 않았고, 계속 할 마음이 있다는 소리니까.

나중에 출시 했을 때 이 리텐션을 유지만 해줘도 좋겠다고 생각하지만, 현실은 그렇지 않겠지 아마 ㅎ

다음은 2, 3일차인데... 각 10%, 5%지?

이건 많이 나빠. 아주 나빠.

1일차가 38%인데, 2일차가 10%면 거의 1/4토막 난 거 잖아?

이유야 여러가지가 있겠지만, 다른 피드백들을 정리해서 판단했을 땐 아마도

"컨텐츠 볼륨이 작다"일 가능성이 매우 높다고 생각해.

이번 빌드에 내가 밸런스 조정을 못해서 하루 이틀 바짝 달리면 모든 생산 시설을 다 열 수 있는 상황이었거든.

애초에 게임 볼륨을 크게 가져갈 생각은 없었지만, 그래도 이건 너무 짧지.

컨텐츠를 늘리던, 후반부 허들을 높히던가 해서 계속 플레이를 할 목표를 만들어줄 필요가 있을거야.

이게 이번 테스트에 발견한 가장 큰 숙제라고 생각해.

그래서, 어디서 그만 뒀나요?

진행 상황에 대한 체크는 다이얼로그(대화씬) 실행 여부로 진행했어.

시스템상 첫 오픈시 한번만 뜨게 되어있어서 중복 체크가 편했거든. 아무래도 환생이 있는 게임이라...

이건 실행 및 스테이지 진행에 따른 그래프야.

다른 항목들은 평범하게 줄어드는데, Dia_1002(25스테이지) 도달 전후로 그래프의 폭이 큰 걸 확인할 수 있었어.

저 쯤에 이탈이 많아진다는 이야기야. 왜 일까?

개인적으론 가장 이해가 안되었던 게 첫 실행이야.

데이터만 보면 첫 실행 후 게임도 안해보고 타이틀화면에서 그만둔 사람이 3명이라는 소린데,

이건 아무리 고민해봐도 모르겠더라... 거기서 뭐 하는게 없거든.

혹시 타이틀만 보고 그만둔 친구가 이 글을 본다면 댓글 좀 달아주라 ㅠ 왜 그랬니...

다음은 시설 오픈에 따른 그래프야.

역시 다른 데는 다 평범한데, 화덕에서 농장으로 넘어가는 쪽 이탈이 큰 것을 볼 수 있어.

앞서 스테이지 데이터와 같이 생각해보면, 농장을 해금하는데 걸리는 비용이 큰 게 아닐까 싶어.

아직 애정 붙이기 전인 플레이 초기 단계인데 비용 허들이 높으니, 귀찮아져서 나가는거지.

아마 해당 타이밍이 스테이지 25 전후가 아닐까 싶네.

최종적으로 초반 난이도는 조금 더 낮추고, 후반부 난이도는 높혀도 되겠다고 생각했어.

광고는 얼마나 보지?

테스트 버전에선 실제 광고는 아니어도 20초 정도 대기해야 보상을 주는 더미 페이지를 붙여 놨거든?

그래서 광고를 얼마나 보는지도 확인이 가능할 것 같았어. 그래서 체크를 했고...

이게 그 결과야.

AdStart가 광고 시작, AdDone이 광고 종료(리워드 획득)인 거지.

대충 계산해보면, 유저 1명당 평균 시청 횟수는 22회, DAU당 시청 횟수는 15회 쯤 되는 것 같아.

(데이터 신뢰도 찾기엔 모수가 너무 작으니, 그냥 재미로만 봐 줘.)

비교군은 없지만, 언젠가 봤던 세미나에서 일 6회 정도 광고를 보도록 설계하면 좋다는 이야기를 들은 기억이 있어. (확실하진 않아)

그걸 떠올려보면 광고 시청 횟수는 나쁘지 않다는 생각이 들어.

다만 현재 시스템에선 광고가 오픈되는 타이밍이 좀 뒤쪽인데, 이걸 앞으로 당기면 더 좋지 않나? 란 생각은 있어.

평균 플레이 타임은?

이건 어떻게 체크하는지 모르겠는데, 파이어베이스 메인에서 띄워주더라.

...사용자 참여라는 이름과 시간이 뜨는 걸 보면 이게 아마도 플레이타임이 맞겠지?;

대충 1시간에서 왔다갔다 했던 것 같아. 다행히 이건 비교군(?)이 있는데,

저번에 만들었었던 Bounce Bunny!'야.

당시엔 파이어베이스를 안 붙였지만, 대신 애드몹에서 비슷한 걸 보여주더라구.

그게 이건데, 이름이 비슷하니 대충 비슷하게 봐도 되지 않을까 싶어 ㅎ

그렇게 치면, 첫 게임보다는 더 오래 할만한 것 같기는 하네.

결론

앞선 데이터를 바탕으로 내가 결정한 추가 작업 리스트는 대충 이래.

데이터는 여기까지야.

최대한 간단하게 정리하려 했는데 어떻게 보였을지 모르겠네.

앞에서도 여러 번 말했지만, 데이터 신뢰도가 낮은데다 파이어베이스도 처음 사용해봐서 이상하게 쓰고 있는게 많을거야.

혹시라도 관련해서 잘 아는 친구가 있음 댓글로 '그거 그렇게 하는거 아닌데-' 라고 댓글 남겨주라.

여기까지만 보면 수정사항이 별로 없어보이지만, 사실 친구들이 남겨준 댓글이나 이메일까지 포함하면 리스트가 어마어마해.

...그치?

왜 4개월 전 빌드보다 수정사항이 더 많아진 것 같은 느낌이 들지?;; ㅋㅋ

전달 해 준 의견들은 이번 달 남은 기간 중에 열심히 수정해서 더 좋은 게임 만들기 위해 노력할게.

긴 글 읽어준 친구들, 테스트 해준 친구들 모두 고마워!

그럼 다들 개발 열심히 해!!

[익명(112.149)]

고생한다 항상 말하지만 성공할거고 피자한판

[익명(112.149)]

혹시 타이틀만 보고 그만둔 친구가 이 글을 본다면 댓글 좀 달아주라 ㅠ 왜 그랬니.. <<<< 첨 앱이나 게임 내본사람들이 다 궁금해하는건데 이런 사람 원래 ㅈㄴ 많음. 유명한 게임에서도 가입하고 겜 실행도 안하는사람, 실행했는데 캐릭터 안만드는 사람이 ㅈㄴ 많아서 비율이 얼마나 되는지 조사도하고, 이유도 리서치하는데 뭐 지 맴이라서 왜그런지는 아무도 모름ㅋㅋㅋㅋ

[익명(112.149)]

실제로 인디겜이나 앱 내봐도 가입하고 안하는 사람, 추가정보 입력안하는 사람들 ㅈㄴ 많아서 첨 내보면 스트레스 받는데 하다보면 그냥 아 당연한 수치구나 하고 받아들이게 된다 ㅋㅋㅋㅋㅋ

[익명(112.149)]

그리고 출시 언제하냐 빨리 출시하고 고치는게 답이다 ㄹㅇ

[로망바드(kong1659)]

오오 그렇구나. 번거롭게 별도 APK까지 설치했는데 실행하자마자 타이틀만 보고 껐다니까 뭔가 다른 문제가 있나 했지. 출시 일자는 7월 29일로 희망(?)하고 있어. 이번엔 더 미루지 말고 니 말마따나 출시하고 고쳐야지 ㅎㅎ 답변 고마웡.

[익명(115.21)]

솔직히 출시하고 개선한다 ㅇㅈ 나도 빡시게 준비해서 첫 출시한거보다, 리뷰나 카페에 건의들 수용한게 더 퀄리티 높았음 게임다워지고 - dc App

[익명(223.33)]

의견냈던 사람중에 하나인데 성실하게 분석하고 문제점 고치는 모습에서 배울점이 많다 ㅇㅇ 일단 시스템자체는 거의 완성된걸로 보이고 아직 니가말한 밸런스 문제는 남아있지만 플레이에 지장은 없으니까 나도 얼른 출시하고 고치는 방향으로 가도 괜찮을거 같음

[로망바드(kong1659)]

응 이제 광고랑 결제랑 붙이고 출시해야지. 나도 더 늦추고 싶진 않아서 이번달까지만 해보고 출시할 예정이야. 그땐 의견 고마웠어 :)

[익명(124.61)]

뭔가 어지럽다

[익명(14.34)]

게임이 꽤 재미있어서 처음 받고 켰을 땐 쉬지 않고 했는데, 불태우듯이 하고 나면 사실 다시 켤 마음이 별로 안 드는 게 사실

[익명(14.34)]

출석 체크라던가 일일 보상 등을 꽤 매력적이게 추가하면 좋을 듯. '중년기사 김봉식'의 지하던전인가? 그런 시스템 한번 보고 꾸준하게 유저를 잡아놓을 방법을 궁리해봐

[로망바드(kong1659)]

나는 가늘게 오래가고 싶었는데 ㅠ 좀 방법을 찾아봐야겠다. 의견 고마웡

[유니티베이비(rudans1236)]

와.. 데이터 수집해서 분석하는 능력이 대단하다.. 나는 개인적으로 타 키우기 게임 이것저것 해보면서 아이디어 얻고 밸런스 분석해보고 하는걸 추천하고싶어! 그리고 혹시 애널리틱스 구현하는데 얼마나 걸렸어? - dc App

[로망바드(kong1659)]

하루! 뭐 SDK 임포트하니까 끝나던데? 알아보고 테스트하는데 시간이 많이 걸렸어.

[유니티베이비(rudans1236)]

아하 생각보다 구성이 잘돼있구나 답변 고마워! - dc App

[익명(211.36)]

정성추

[r35(likudo)]

대단혀

[익명(222.238)]

빈말 아니고 진짜 진짜 진심으로 멋지다. 응원할게

[떵기(125.186)]

보통 이정도하면 수익 얼마나옴

[로망바드(kong1659)]

이건 나도 알고 싶은 정보인데... ㅎㅎㅎ

[오목눈이(218.48)]

와 빡세네. 배우고갑니다

[GMP(growy920)]

개추

[엘액스(58.78)]

개추 덕분에 나도 지표로그나 달아봐야겠음.

[익명(103.51)]

크 이번에도 역시 많이 배웠다 성공 가즈아

[누아(rbfwmqwntm)]

많이 배워가요 정말 멋지십니다

[익명(103.51)]

re)혹시 타이틀만 보고 그만둔 친구가 이 글을 본다면 댓글 좀 달아주라 ㅠ 왜 그랬니... 난 요기 사이트는 안하고, 친구 ㅇㅇ한테 추천받아서 같이 해봣는데, 내가 뭘했는지 정확하진 않지만 나인거같아. 앱을 전달받은게 업무중이었고, 업무하면서 켰는데 켜기만하고 업무하다 까먹은게 아닌가 싶어. 애뮬레이터로도 하고, 안드로이드 기기로도 켰던거같은데, 막상 플레이 자체는 친구 ㅇㅇ꺼로 같이 플레이 했던거같아... 형이 말했듯이 데이터는 항상 신뢰도가 연관되고, 뻥튀기도 있고 하니까 극단점같은건 잘 걸러서 둥글둥글 이해해야해

[-인.(bloodinfirst)]

되게 성실하게 자기주도적으로 업무수행하시고 목표 방향 설정도 되게 잘하시고 완성작 넘 기대대요 짱짱 멀 하셔두 성공하실거이가튼분