리포트에 안 잡히는 광고, 정말 효과가 없을까요
이번에도 피자 가게 사장님 이야기예요. 지금까지의 상황부터 짧게 정리할게요.
사장님은 앱으로 피자 주문을 받고, 앱 설치를 늘리려고 광고 네 개를 돌려요. 앱스토어 검색 결과 맨 위에 뜨는 Apple 검색 광고, 게임 같은 다른 앱을 쓰다 보면 뜨는 AppLovin 광고, 그리고 Snapchat 광고와 TikTok 광고예요. 어느 광고 덕분에 앱이 깔렸는지는 측정 회사가 세어서 매달 리포트로 보내 줘요. 이런 측정 회사를 통틀어 MMP(Mobile Measurement Partner, 모바일 측정 파트너)라고 불러요. MMP는 보통 앱을 깔기 직전에 마지막으로 누른 광고에 그 설치 1건을 통째로 줘요.
지난 글 "그 설치, 광고 없었어도 생겼을까요"에서는 리포트에 광고 몫으로 찍힌 설치와 광고가 정말 만든 설치는 같은 숫자가 아니라는 걸 봤어요. 예를 들어 리포트에는 Apple 검색 광고가 설치 600건을 데려왔다고 찍혔지만, 그중엔 광고가 없었어도 어차피 앱을 깔았을 사람이 잔뜩 섞여 있었어요. 그래서 리포트 숫자 대신 광고가 만든 설치, 곧 그 광고를 껐다면 사라졌을 설치를 따로 재 봤어요. 재는 방법은 두 가지였어요.
- 실험 방법: 광고를 보여줄 쪽과 안 보여줄 쪽을 일부러 랜덤으로 나누고, 두 쪽의 설치를 비교해요.
- 관찰 방법: 이미 쌓인 기록에서 광고를 본 사람과 안 본 사람 중 비슷한 사람끼리 짝지어 비교해요.
그렇게 재 본 결과는 이래요(이 글의 숫자는 전부 예시예요).
| 광고 | 리포트에 찍힌 설치 | 실험과 관찰로 잰 "광고가 만든 설치" |
|---|---|---|
| Apple 검색 | 600건 | 60건 |
| AppLovin | 400건 | 200건 |
| Snapchat | 300건 | 240건 |
| TikTok | 100건 | 150건 |
| 합계 | 1,400건 | 650건 |
표에서 눈에 띄는 건 Apple 검색 광고와 TikTok 광고예요.
- Apple 검색 광고는 리포트에서 실제보다 훨씬 커 보였어요. 리포트에는 600건이 찍혔지만, 광고가 정말 만든 설치는 60건으로 10분의 1뿐이었어요. 앱스토어에서 이 앱 이름을 검색한 사람 중에는, 검색하기 전부터 이미 이 앱을 깔 생각이었던 사람이 많아요. 이런 사람은 검색 결과 맨 위에 광고가 떠 있으면 그 광고를 눌러 깔고, 광고가 없었다면 바로 아래 일반 검색 결과를 눌러 깔았을 거예요. 어느 쪽이든 설치는 생겼을 텐데, 광고를 눌렀다는 이유로 리포트에는 Apple 검색 광고 몫으로 찍혀요.
- TikTok 광고는 거꾸로 리포트에서 실제보다 작아 보였어요. 리포트에는 100건이었지만, 광고가 정말 만든 설치는 150건이었어요. 어떤 사람이 TikTok 광고에서 이 앱을 처음 알았지만 그 자리에서는 깔지 않았다고 해 볼게요. 며칠 뒤 앱스토어에서 앱 이름을 검색하고, 맨 위에 뜬 Apple 검색 광고를 눌러 깔았어요. 이 사람이 앱을 깔게 만든 건 TikTok 광고인데, 리포트는 마지막에 누른 광고에 설치를 주니까 Apple 검색 광고 몫으로 찍혀요.
이렇게 리포트 숫자는 앱을 깔기 직전에 누른 광고 쪽으로 쏠려요. 이 표는 뒤에서 다시 써요.
10월 리포트가 이상해요
올해 6월, 사장님은 지하철 광고판을 새로 걸었어요. 그리고 8월부터는 유튜버 협찬도 시작했어요.
- 지하철 광고판: 가게 근처 지하철역 여섯 곳의 출구 계단 옆에 앱 이름과 피자 사진을 크게 걸고, 구석에 앱을 바로 깔 수 있는 QR 코드도 넣었어요. 여섯 곳을 다 걸면 한 주에 20만원, 네 주면 한 달 80만원이에요.
- 유튜버 협찬: 구독자가 많은 먹방 유튜버가 매달 한 편씩 사장님 피자를 먹는 영상을 올려요. 협찬비는 한 달 180만원이에요. 영상 설명란에는 앱을 바로 깔 수 있는 링크도 달아 줬어요. 그냥 UTM(Urchin Tracking Module) 링크가 아니라, MMP에서 발급받은 트래킹 링크예요. 웹사이트 마케팅에서는 링크 끝에 "어디서 왔는지" 표시를 붙이는 UTM 링크를 많이 써요. 그런데 앱은 앱스토어를 거쳐서 깔리다 보니 이 표시가 중간에 사라져서, 그냥 UTM 링크로는 누가 이 링크로 앱을 깔았는지 추적이 안 되는 경우가 많아요. MMP 트래킹 링크는 누가 링크를 눌렀는지 MMP가 먼저 기록해 뒀다가 앱 설치와 이어 붙여 줘요. 그래서 이 링크를 눌러 앱을 깐 사람은 리포트에 유튜버 협찬 몫으로 잡혀요.
사장님이 고른 지하철 광고판 자리는 주 단위 입찰로 팔렸어요. 같은 자리를 노리는 다른 광고주가 있었거든요. 6~8월에 사장님은 매주 같은 값으로 입찰했는데, 다른 광고주가 더 높은 값을 부른 주에는 져서 못 걸었어요. 9월부터는 그 광고주가 빠져서, 사장님이 원하는 만큼 매주 걸 수 있게 됐어요. 5월부터 10월까지 있었던 일을 한눈에 정리하면 이래요. 원래 광고 네 개(Apple 검색, AppLovin, Snapchat, TikTok)는 이 기간 내내 매달 비슷한 돈을 썼어요. 달라진 건 지하철 광고판과 유튜버 협찬뿐이에요.
| 달 | 지하철 광고판 | 유튜버 협찬 | 메모 |
|---|---|---|---|
| 5월 | 없음 | 없음 | 한 달 설치 2,000건쯤 |
| 6월 | 시작. 입찰에서 이긴 2주와 4주에만 걸림 | 없음 | |
| 7월 | 입찰에서 이긴 1주와 3주에만 걸림 | 없음 | 1주에 경쟁 앱이 반값 쿠폰을 뿌림 |
| 8월 | 입찰에서 이긴 2주와 4주에만 걸림 | 시작. 3주에 첫 영상 | |
| 9월 | 매주 걸림. 다만 여섯 곳 중 세 곳만 걸어 둠(그달 지하철 광고판 비용은 40만원쯤) | 매달 영상 한 편 | 지하철 광고판 효과를 재 보려고 일부러 세 곳을 비워 둠(뒤에서 자세히 볼게요) |
| 10월 | 매주 여섯 곳 다 걸림 | 매달 영상 한 편 | 한 달 설치 2,200건 |
10월이 끝나고, 10월 한 달 치 MMP 리포트를 열어 봤어요.
지하철 광고판은 10건, 유튜버 협찬은 20건이에요. 사장님은 고민에 빠졌어요. "지하철 광고판에 매달 80만원씩 쓰는데 10건이면 1건에 8만원이야. 떼야 하나?"
그림의 마지막 줄 "오가닉 720건"은 어느 광고에서 왔는지 리포트가 찾지 못한 설치를 모아 둔 줄이에요. 친구 추천을 듣고 앱스토어에서 바로 깐 설치처럼, 광고를 누른 기록이 없는 설치가 여기 모여요. 리포트는 이런 설치를 오가닉(organic)이라고 불러요.
그런데 숫자를 다 더해 보면 이상한 점이 있어요. 10월 리포트에 찍힌 설치를 모두 더하면 2,200건이에요. 지하철 광고판을 걸기 전인 5월에는 2,000건쯤이었어요. 원래 광고 네 개(Apple 검색, AppLovin, Snapchat, TikTok)는 5월과 비슷하게 돌렸어요. 설명을 쉽게 하려고, 5월에서 10월로 계절이 바뀌는 동안 이 네 광고에서 나오는 설치는 별로 달라지지 않았다고 칠게요. 그러면 늘어난 200건은 새로 시작한 지하철 광고판과 유튜버 협찬 덕분일 가능성이 커요. 그런데 리포트에서 지하철 광고판과 유튜버 협찬 몫은 합쳐 30건(10건 + 20건)뿐이에요. 나머지 170건은 어디로 갔을까요? 5월 리포트와 10월 리포트를 줄마다 비교해 보면 이래요.
| 리포트 줄 | 5월(지하철 광고판, 유튜버 협찬 시작 전) | 10월 | 늘어난 설치 |
|---|---|---|---|
| 오가닉 | 600건 | 720건 | 120건 |
| Apple 검색 | 600건 | 650건 | 50건 |
| 지하철 광고판 | 없음 | 10건 | 10건 |
| 유튜버 협찬 | 없음 | 20건 | 20건 |
| 합계 | 200건 |
늘어난 200건 중 지하철 광고판과 유튜버 협찬 몫으로 찍힌 건 10건과 20건, 합쳐 30건뿐이에요. 나머지 170건은 오가닉과 Apple 검색 줄에서 늘었어요.
왜 이렇게 찍혔는지 지하철 광고판부터 볼게요. 지하철 광고판 앞에서 QR 코드를 찍고 그 자리에서 앱을 깐 사람은 리포트에 지하철 광고판 몫으로 잡혀요. 그게 10건이에요. 그런데 사장님 지하철 광고판에서는 QR을 찍은 사람이 많지 않았어요. 대부분은 출근길에 지하철 광고판을 보고 그냥 지나갔다가, 그날 저녁 앱스토어에서 앱 이름을 찾아 깔았어요. 이런 사람이 지하철 광고판을 봤다는 기록은 어디에도 없어요. 그래서 검색 결과 맨 위의 Apple 검색 광고를 눌러 깔았다면 Apple 검색 몫으로, 그 아래 일반 검색 결과를 눌러 깔았다면 오가닉으로 찍혀요.
유튜버 협찬도 비슷해요. 영상을 보다가 설명란의 추적 링크를 눌러 바로 깐 사람은 유튜버 협찬 몫으로 잡혀요. 그게 20건이에요. 이번에도 링크를 누른 사람보다, 영상을 보고 넘어갔다가 며칠 뒤 피자가 생각나서 앱 이름을 검색해 깐 사람이 훨씬 많았어요. 이런 설치는 지하철 광고판과 똑같이 Apple 검색이나 오가닉으로 찍혀요.
게다가 리포트에 잡힌 10건, 20건도 QR을 찍거나 링크를 누른 사람을 다 센 게 아니에요. 앞의 오가닉 설명처럼, iPhone에서 추적을 거절한 사람은 QR을 찍고 깔았든 링크를 누르고 깔았든 오가닉으로 갈 수 있어요. 10건, 20건은 QR이나 링크로 깐 사람 가운데 추적까지 이어진 사람만 센 숫자예요.
정리하면, 오가닉이 120건 늘어난 데는 두 종류가 섞여 있어요.
- 광고를 보고, 나중에 직접 검색해서 깐 사람: 지하철 광고판이나 영상을 보고 나중에 앱 이름을 검색해서, 맨 위 검색 광고가 아니라 그 아래 일반 검색 결과를 눌러 깐 사람이에요. QR도, 영상 속 링크도, 검색 광고도 누르지 않았으니 리포트에 남는 광고 기록이 없어요.
- QR이나 링크를 눌렀지만 추적이 끊긴 사람: iPhone에서 추적을 거절하는 바람에, 지하철 광고판이나 유튜버 협찬 몫으로 이어 붙지 못한 사람이에요.
물론 현실에서는 입소문이 나거나 앱스토어 순위가 오르는 것처럼, 광고와 상관없는 이유로 오가닉이 저절로 늘었을 수도 있어요. 이 글에서는 설명을 쉽게 하려고, 5월보다 늘어난 오가닉 120건은 전부 지하철 광고판과 유튜버 협찬 때문이라고 정해 둘게요.
그럼 지하철 광고판과 유튜버 협찬이 진짜로 데려온 설치는 각각 몇 건이고, 리포트 어느 줄에 숨어 있을까요? 현실에서는 아무도 정답을 알 수 없어요. 하지만 이 글에서는 설명을 위해, 실제로는 이랬다고 정답을 정해 두고 갈게요.
| 광고 | 진짜로 데려온 설치 | 리포트에서 자기 몫으로 잡힌 설치(QR, 링크) | Apple 검색 줄에 섞인 설치 | 오가닉 줄에 섞인 설치 |
|---|---|---|---|---|
| 지하철 광고판 | 80건 | 10건 | 20건 | 50건 |
| 유튜버 협찬 | 120건 | 20건 | 30건 | 70건 |
| 합계 | 200건 | 30건 | 50건 | 120건 |
이 표를 읽으면 이래요. 지하철 광고판과 유튜버 협찬이 데려온 200건 가운데 자기 이름으로 잡힌 건 30건뿐이고, 50건은 Apple 검색 줄에, 120건은 오가닉 줄에 섞여 들어갔어요. 그래서 앞에서 5월과 10월 리포트를 비교했을 때 Apple 검색 줄이 50건, 오가닉 줄이 120건 늘어나 있었던 거예요.
물론 사장님은 이 표를 볼 수 없어요. 사장님 손에 있는 건 앞에서 본 10월 MMP 리포트뿐이고, 이 리포트만 봐서는 지하철 광고판이 진짜 몇 건을 데려왔는지 알 수가 없어요. 이 글의 나머지는 사장님이 이 표의 "진짜로 데려온 설치" 칸을 어떻게 알아내는지에 대한 이야기예요.
추적을 거절해서 리포트에서 빠질 수 있는 건 지하철 광고판과 유튜버 협찬만의 문제도 아니에요. TikTok이나 Snapchat 광고를 눌러 앱을 깐 사람도 iPhone에서 추적을 거절하면 똑같이 오가닉으로 찍힐 수 있어요. 광고를 직접 눌러서 깐 설치라도, 리포트가 놓치는 경우가 꽤 있는 거예요.
이렇게 리포트가 놓치는 설치까지 잴 때 쓰는 방법이 이 글에서 소개할 MMM(마케팅 믹스 모델링)이에요. TikTok이나 Snapchat처럼 눌러서 바로 앱을 깔 수 있는 광고에도 MMM을 쓸 수 있어요. 다만 이 글에서는 MMM이 가장 필요한 대표적인 예, 지하철 광고판과 유튜버 협찬에 집중할게요. 요즘 광고비가 빠르게 늘고 있는 광고이면서, 리포트로는 가장 재기 어려운 광고이기도 하거든요.
실험으로도, 관찰로도 재기 어려워요
그럼 맨 앞에서 말한 두 방법, 실험 방법과 관찰 방법으로 지하철 광고판과 유튜버 협찬을 재 볼 수 있을까요? 두 방법이 정확히 뭔지부터 볼게요.
실험 방법은 광고를 볼 사람과 안 볼 사람을 미리 나눠 두는 방법이었어요. 예를 들어 TikTok에 부탁해서 2만 명을 동전 던지기로 반씩 나누고, 한쪽 1만 명에게만 사장님 광고를 보여줘요. 한 달 뒤 두 그룹에서 앱을 깐 사람 수를 비교하면, 그 차이가 광고가 만든 설치예요. 두 그룹은 광고를 봤느냐 말고는 다 비슷하니까요.
지하철 광고판에 이걸 하려면, 역을 지나가는 사람을 동전 던지기로 나눠서 앞면이 나온 사람만 지하철 광고판을 보게 해야 해요. 그건 불가능하죠. 지하철 광고판은 그 앞을 지나는 사람이면 누구나 봐요. 유튜버 영상도 마찬가지예요. TikTok 광고는 TikTok이 보여줄 사람을 고르지만, 유튜버 영상은 찾아 들어온 사람이면 누구나 봐요. 사장님이 "이 사람은 보고, 저 사람은 보지 마세요" 하고 나눌 방법이 없어요.
설령 나눌 수 있다고 해도 문제가 하나 더 남아요. 한 달 뒤 두 그룹의 설치를 비교하려면, 역을 지나간 사람 한 명 한 명이 그 뒤에 앱을 깔았는지까지 알아야 해요. TikTok 실험에서는 TikTok이 누구에게 광고를 보여줬는지 알고 있으니 그 사람들의 설치와 맞춰 볼 수 있어요. 하지만 역을 지나간 사람은 이름도 연락처도 남기지 않아서, 누가 나중에 앱을 깔았는지 쫓아갈 방법이 없어요.
사람을 나눌 수 없다면, 역을 나누는 방법은 있어요. 여섯 역 가운데 세 곳에서만 지하철 광고판을 떼고, 그 근처 동네에서 설치가 얼마나 줄었는지 보는 거예요. 이렇게 일부 지역에서만 광고를 끄고 비교하는 실험을 지역 실험이라고 해요. 사장님도 9월에 이 실험을 해 봤어요(뒤에서 다시 볼게요). 다만 이 실험에는 한계가 있어요. 실험하는 동안 지하철 광고판 세 곳을 한 달 내내 비워 둬야 해요. 그리고 이 실험에서 끈 건 지하철 광고판뿐이라, 알 수 있는 것도 지하철 광고판이 몇 건을 데려왔는지뿐이에요. 유튜버 협찬이 몇 건을 데려왔는지는 따로 재야 하는데, 유튜버 협찬은 이런 실험도 안 돼요. 영상은 어느 동네에서나 볼 수 있어서, "이 동네만 영상을 못 보게" 할 수가 없거든요.
관찰 방법은 실험 없이, 이미 쌓인 기록으로 비교하는 방법이었어요. 광고를 본 사람과 안 본 사람은 원래 조금씩 달라요. 그래서 나이나 배달 앱을 쓰는 횟수가 비슷한 사람끼리 짝지어서 그 차이를 맞춘 뒤, 앱을 깐 비율을 비교하는 거죠. 그런데 짝을 지으려면 적어도 "이 사람은 광고를 봤고, 저 사람은 안 봤다"는 건 알아야 해요.
TikTok 광고는 TikTok이 누구에게 보여줬는지 기록이 남으니 이걸 알 수 있어요. 지하철 광고판과 유튜버 협찬은 아니에요. 기록이 남는 건 QR을 찍거나 링크를 누른 사람, 그것도 iPhone에서 추적을 허용한 사람뿐이에요. 기록이 없는 사람 중에는 지하철 광고판을 아예 못 본 사람도 있지만, 지하철 광고판을 보고 그냥 지나간 사람, 영상만 보고 며칠 뒤 검색해서 깐 사람도 잔뜩 섞여 있어요. "광고를 안 본 그룹"을 만들려고 해도, 그 안에 사실은 광고를 본 사람이 얼마나 섞였는지 알 수가 없는 거예요. 아무리 비슷한 사람끼리 짝지어도, 짝지은 상대가 실은 지하철 광고판을 본 사람일 수 있으니 비교가 성립하지 않아요.
정리하면, 사장님에게는 이런 방법이 필요해요.
- 사람을 나누지 않아도 되고,
- 누가 광고를 봤는지 다 알지 못해도 되고,
- 광고를 일부러 끄지 않아도 되는 방법이요.
그리고 하나가 더 있어요. 지하철 광고판과 유튜버 협찬이 진짜로 몇 건을 데려왔는지 알아내려면, 지하철 광고판과 유튜버 협찬만 들여다볼 게 아니라 원래 광고 네 개까지 전부 같이 봐야 더 정확해요. 지하철 광고판과 유튜버 협찬이 데려온 설치가 다른 광고의 줄로 흘러갈 수 있기 때문이에요. 앞의 표에서는 예시를 단순하게 하려고 Apple 검색 줄과 오가닉 줄로만 흘러갔다고 정했지만, 실제로는 어느 줄로든 갈 수 있어요. 예를 들어 출근길에 지하철 광고판을 보고 "퇴근하고 이 앱 깔아야겠다" 생각한 사람이, 저녁에 TikTok을 보다가 마침 뜬 사장님 광고를 보고 생각이 나서 그 광고를 눌러 깔았다고 해 볼게요. 이 사람이 앱을 깔기로 한 건 지하철 광고판 때문인데, 리포트에는 마지막에 누른 TikTok 줄에 찍혀요. 이 사람이 TikTok 대신 게임을 하다가 AppLovin 광고를 눌러 깔았다면, 이번엔 AppLovin 줄에 찍히고요. 사장님은 지하철 광고판과 유튜버 협찬이 데려온 설치가 어느 줄로 얼마나 흘러갔는지 몰라요. 그러니 원래 광고 네 개(Apple 검색, AppLovin, Snapchat, TikTok)와 지하철 광고판, 유튜버 협찬, 모두 여섯 개를 한꺼번에 놓고 10월 2,200건을 처음부터 다시 나눠야 해요. 그래야 Apple 검색이나 오가닉 같은 다른 줄에 섞여 들어간 설치를, 그 설치를 진짜로 데려온 지하철 광고판이나 유튜버 협찬 몫으로 옮겨 줄 수 있어요.
누가 봤는지는 다 몰라도, 매주 광고에 쓴 돈과 매주 앱이 깔린 건수는 알아요
여기서부터가 본격적인 MMM 이야기예요. 미리 한 줄로 말하면, MMM은 매주 앱이 깔린 건수를 "광고가 없어도 나왔을 설치"와 "광고마다의 몫"으로 나누는 방법이에요. 누가 광고를 봤는지는 몰라도 돼요. 가게 장부만 있으면 돼요. 사장님 장부로 하나씩 해 볼게요.
사장님 손에 빠짐없이 남는 기록이 하나 있어요. 가게 장부예요. 사장님은 매주 이런 걸 적어 둬요. 예를 들어 10월 1주 장부는 이래요.
| 10월 1주 장부 | 숫자 | 어디서 알 수 있나 |
|---|---|---|
| ① 광고에 쓴 돈 | ||
| Apple 검색 | 44만원 | 광고 관리 화면 |
| AppLovin | 63만원 | 광고 관리 화면 |
| Snapchat | 72만원 | 광고 관리 화면 |
| TikTok | 35만원 | 광고 관리 화면 |
| 지하철 광고판 | 20만원(여섯 곳 다 걸림) | 광고 업체와 맺은 계약서 |
| ② 유튜버 영상이 보인 정도 | ||
| 그 주에 늘어난 조회수 | 8만 회 | 유튜브 영상 통계 |
| ③ 결과 | ||
| 그 주 깔린 앱 | 535건 | 앱스토어 |
①은 사장님이 직접 내는 돈이니까 정확히 알아요. ②는 유튜버 협찬 칸이에요. 장부에는 광고마다 그 주에 이 광고가 사람들에게 얼마나 닿았는지를 가장 잘 따라가는 숫자를 적으면 돼요. 그래야 설치가 늘고 준 것과 맞춰 볼 수 있거든요. 대부분의 광고는 쓴 돈이 그 숫자예요. 이번 주에 돈을 더 쓰면 광고도 더 많이 보이고, 그만큼 설치도 같이 움직이니까요. 유튜버 협찬은 달라요. 협찬비는 한 달에 180만원으로 정해져 있어서, 네 주로 나눠 매주 45만원이라고 적으면 영상이 많이 보인 주든 덜 보인 주든 똑같은 숫자가 찍혀요. 그래서 유튜버 협찬은 쓴 돈 대신 그 주에 영상이 얼마나 보였는지, 곧 조회수를 적어요. 이건 유튜브 화면에서 볼 수 있어요. 다만 조회수는 계속 쌓이기만 하니, 그 주에 새로 늘어난 조회수만 적어요. 그리고 ③ 깔린 앱 수는 누가 어떤 광고를 보고 깔았는지와 상관없이, 앱스토어에서 전체 숫자를 빠짐없이 볼 수 있어요. 이 장부에는 광고에 쓴 돈도, 그 주에 깔린 앱 수도 추적 기록과 상관없이 전부 들어 있어요.
그러니 질문을 바꿔 볼 수 있어요. "누가 지하철 광고판을 보고 깔았나" 대신 "지하철 광고판을 건 주에는 안 건 주보다 설치가 몇 건 많았나"로요. 유튜버 협찬이라면 "영상 조회수가 많이 늘어난 주에는 적게 늘어난 주보다 설치가 몇 건 많았나"가 되겠죠. 사람을 하나하나 따라가는 대신, 주마다 광고에 쓴 돈과 주마다 앱이 깔린 건수를 나란히 놓고 보는 거예요.
여기서 조심할 게 하나 있어요. 광고를 건 지난주와 뗀 이번 주, 딱 두 주만 비교하면 안 돼요. 이번 주에 마침 비가 내내 왔거나 경쟁 앱이 쿠폰을 뿌렸다면, 설치가 줄어든 게 광고를 떼서인지 날씨나 쿠폰 때문인지 알 수 없으니까요. 그래서 두 주가 아니라 여러 주를 봐요. 그리고 장부에 "특이 사항" 칸을 하나 더 만들어서, 그 주에 광고 말고 설치를 움직였을 만한 일이 있으면 적어 둬요. "7월 1주: 경쟁 앱이 반값 쿠폰을 뿌림", "9월 3주: 앱스토어 인기 순위 10위 안에 듦"처럼요.
먼저 새 광고 두 개(지하철 광고판, 유튜버 협찬) 가운데 지하철 광고판만 있던 때의 장부부터 볼게요. 유튜버 협찬을 시작하기 전인 6~7월 두 달(8주)이에요. 이때 지하철 광고판은 앞의 월별 표처럼 입찰에서 이긴 주에만 걸렸고, 원래 광고 네 개는 매주 같은 돈을 썼어요. 그러니 주마다 달라진 건 지하철 광고판 하나뿐이에요. 그리고 지하철 광고판을 본 사람은 그 주에 바로 앱을 깔 수도 있지만, 다음 주나 그다음 주에 깔 수도 있어요. 여기서는 설명을 쉽게 하려고, 지하철 광고판이 데려온 설치는 전부 지하철 광고판을 건 그 주에 깔렸다고 칠게요. 몇 주 뒤에 깔린 설치는 뒤에서 따로 볼게요.
| 주 | 지하철 광고판 | 특이 사항 | 그 주의 설치 |
|---|---|---|---|
| 6월 1주 | 안 걸었음 | 없음 | 488건 |
| 6월 2주 | 걸었음 | 없음 | 512건 |
| 6월 3주 | 안 걸었음 | 없음 | 491건 |
| 6월 4주 | 걸었음 | 없음 | 509건 |
| 7월 1주 | 걸었음 | 경쟁 앱이 반값 쿠폰을 뿌림 | 470건 |
| 7월 2주 | 안 걸었음 | 없음 | 490건 |
| 7월 3주 | 걸었음 | 없음 | 511건 |
| 7월 4주 | 안 걸었음 | 없음 | 489건 |
표의 설치는 지하철 광고판 몫이 아니라, 그 주에 깔린 전체 앱 수예요. 쿠폰이 뿌려진 7월 1주는 잠깐 빼고, 세 단계로 볼게요.
- 지하철 광고판을 안 건 네 주(6월 1주와 3주, 7월 2주와 4주): 설치가 488건, 491건, 490건, 489건이에요. 평균 490건쯤이에요. 지하철 광고판이 없어도 매주 이 정도는 깔린다는 뜻이에요. 원래 광고 네 개가 데려온 설치와, 광고가 없어도 어차피 깔았을 사람이 이 안에 들어 있어요.
- 지하철 광고판을 건 세 주(6월 2주와 4주, 7월 3주): 설치가 512건, 509건, 511건이에요. 평균 510건쯤이에요.
- 차이: 510 − 490 = 20건이에요. 지하철 광고판 말고는 다 똑같았으니, 이 20건을 지하철 광고판이 한 주에 데려온 설치라고 볼 수 있어요. 10월 리포트에서 한 달 10건뿐이던 지하철 광고판이, 실제로는 한 주에 20건쯤씩 데려오고 있었을 수 있다는 거예요.
지하철 광고판을 안 건 주끼리도 488건, 491건처럼 몇 건씩 다른 건, 그 주에 피자 생각이 난 사람이 조금 많거나 적었던 것처럼 사람들 사정이 매주 조금씩 달라서예요. 그래서 한 주만 보지 않고 여러 주의 평균을 내요.
7월 1주를 뺀 이유도 표에 있어요. 7월 1주는 지하철 광고판을 걸었는데도 설치가 470건으로 오히려 제일 적어요. 그 주에 경쟁 피자 앱이 반값 쿠폰을 뿌려서 사람들이 그쪽으로 갔거든요. 7월 1주까지 넣고 그냥 평균을 내면, 지하철 광고판을 건 주의 평균이 500건쯤으로 내려가서 지하철 광고판 효과가 10건쯤으로 작아 보여요. 지하철 광고판 탓이 아닌 일이 지하철 광고판 몫을 깎아 먹는 거죠.
그래서 장부에 특이 사항 칸이 필요해요. 경쟁 앱 쿠폰, 앱스토어 순위가 갑자기 오른 주, 비가 내내 온 주, 앱 리뷰가 인터넷에 퍼진 주처럼, 광고가 아닌데 설치를 움직인 일을 적어 두는 거예요. 쿠폰 주가 여러 번 쌓이면 "쿠폰이 뿌려진 주에는 설치가 40건쯤 빠진다"는 것도 같은 방식으로 알 수 있어요. 그러면 7월 1주도 버리지 않고 "지하철 광고판으로 20건 늘고, 쿠폰으로 40건 빠졌다"고 설명할 수 있어요.
해마다 같은 때 되풀이되는 오르내림도 있어요. 이걸 계절성(seasonality)이라고 해요. 예를 들어 피자는 연말에 많이 시켜요. 그래서 광고를 하나도 안 바꿔도 12월에는 매주 설치가 30건쯤 더 나온다고 해볼게요. 반대로 다들 고향에 가는 명절 연휴 주에는 20건쯤 덜 나오고요.
계절을 모르면 이런 착각을 해요. 예를 들어 어떤 가게가 11월에는 지하철 광고판을 안 걸었고, 12월에 처음 걸었다고 해볼게요.
| 주 | 지하철 광고판 | 그 주의 설치 |
|---|---|---|
| 11월 4주 | 안 걸었음 | 490건 |
| 12월 1주 | 걸었음 | 540건 |
두 주만 비교하면 50건이 늘었으니, 지하철 광고판이 한 주에 50건을 데려온 것처럼 보여요. 하지만 그중 30건은 연말이라 어차피 늘었을 설치예요. 지하철 광고판이 데려온 건 20건뿐이죠. 계절 몫 30건이 지하철 광고판 몫으로 잘못 들어가서, 지하철 광고판이 실제보다 두 배 넘게 잘하는 것처럼 보인 거예요.
그래서 MMM은 장부를 1년 넘게 모아서, 계절 몫도 광고 몫과 함께 찾아요. 예를 들어 작년 12월에는 광고를 그대로 뒀는데도 설치가 매주 30건쯤 많았다면, "12월은 원래 30건쯤 많다"는 걸 알 수 있어요. 그러면 12월에 늘어난 50건 가운데 30건은 계절 몫, 나머지 20건은 지하철 광고판 몫으로 나눌 수 있어요. 한 해만 보면 그해에만 우연히 많았던 건지 헷갈리니, 같은 패턴이 여러 해 반복될수록 더 확실해져요.
이 글의 6~7월 장부에는 이런 계절 차이가 없었다고 칠게요.
한 주의 설치를 한 줄로 쓰면
지금까지 6~7월 장부로 한 일을 한 줄로 정리할 수 있어요. 더하기와 빼기만 쓰는 간단한 덧셈이에요.
말로 읽으면 이래요. "그 주에 깔린 앱은, 지하철 광고판이 없어도 매주 나오는 490건에서 시작한다. 지하철 광고판을 건 주면 20건을 더한다. 경쟁 앱이 쿠폰을 뿌린 주면 40건을 뺀다." 이 490건을 이 글에선 기본 설치라고 부를게요.
장부의 주마다 넣어 보면 실제 설치와 거의 맞아요. 지하철 광고판을 건 주는 20건을 더하고, 쿠폰이 뿌려진 7월 1주는 40건을 빼요.
| 주 | 덧셈으로 계산한 설치 | 실제 설치 | 차이 |
|---|---|---|---|
| 6월 1주 | 기본 설치 490건 | 488건 | 2건 |
| 6월 2주 | 기본 설치 490 + 지하철 광고판 20 = 510건 | 512건 | 2건 |
| 6월 3주 | 기본 설치 490건 | 491건 | 1건 |
| 6월 4주 | 기본 설치 490 + 지하철 광고판 20 = 510건 | 509건 | 1건 |
| 7월 1주 | 기본 설치 490 + 지하철 광고판 20 − 쿠폰 40 = 470건 | 470건 | 0건 |
| 7월 2주 | 기본 설치 490건 | 490건 | 0건 |
| 7월 3주 | 기본 설치 490 + 지하철 광고판 20 = 510건 | 511건 | 1건 |
| 7월 4주 | 기본 설치 490건 | 489건 | 1건 |
몇 건씩 차이 나는 건 앞에서 본 것처럼, 사람들 사정에 따라 매주 조금씩 생기는 차이예요.
이 덧셈이 MMM의 뼈대예요. 그 주의 설치를 "광고가 없어도 나오는 부분", "광고마다의 몫", "광고가 아닌 일의 몫"으로 나눠서 더하고 빼는 거예요. 사장님이 돌리는 광고가 하나 더 생기면(예를 들어 8월에 유튜버 협찬을 시작하면) 그 광고의 몫을 더하는 칸이 하나 늘어요. 쿠폰이나 계절처럼 광고 말고 설치를 움직이는 일이 있으면, 그 몫을 더하거나 빼는 칸이 하나 늘고요. 칸이 늘어날 뿐, 더하고 빼는 방식은 그대로예요.
유튜버 협찬이 더해지면
8월부터는 유튜버 협찬도 시작했어요. 첫 영상은 8월 3주에 올라왔어요. 이제는 지하철 광고판과 유튜버 협찬이 함께 돌아가요. 그럼 지하철 광고판과 유튜버 협찬이 각각 몇 건을 데려왔는지, 8월 장부로 나눠 볼게요. 이 네 주 동안 원래 광고 네 개는 똑같이 돌렸고, 비나 쿠폰 같은 특별한 일도 없었어요.
| 주 | 지하철 광고판 | 유튜버 영상 | 그 주의 설치 |
|---|---|---|---|
| 8월 1주 | 안 걸림 | 아직 안 올라옴 | 490건 |
| 8월 2주 | 걸림 | 아직 안 올라옴 | 510건 |
| 8월 3주 | 안 걸림 | 올라옴 | 520건 |
| 8월 4주 | 걸림 | 올라옴 | 540건 |
계산하기 쉽게 숫자를 딱 떨어지게 만들었어요. 실제 장부라면 6~7월처럼 매주 몇 건씩 들쭉날쭉하겠지만, 여기서는 그런 차이가 없다고 칠게요.
이제 한 주씩 차례로 볼게요.
- 8월 1주(둘 다 없음): 지하철 광고판도 안 걸렸고, 유튜버 영상도 아직 안 올라온 주예요. 설치는 490건이에요. 6~7월에 본 기본 설치 490건과 같아요.
- 8월 3주(유튜버 협찬만): 지하철 광고판은 안 걸렸고, 유튜버 영상만 올라온 주예요. 설치는 520건으로, 기본 설치 490건보다 30건 많아요. 이 주에 달라진 건 유튜버 협찬뿐이니, 유튜버 협찬 몫은 한 주에 30건쯤으로 볼 수 있어요.
- 8월 2주(지하철 광고판만): 지하철 광고판만 걸렸고, 유튜버 영상은 아직 안 올라온 주예요. 설치는 510건으로, 기본 설치보다 20건 많아요. 그러니 지하철 광고판 몫은 한 주에 20건쯤으로 볼 수 있어요. 6~7월에 구한 것과 같아요.
- 8월 4주(둘 다 있음): 지하철 광고판도 걸렸고, 유튜버 영상도 올라와 있던 주예요. 앞에서 구한 숫자가 맞다면, 이 주 설치는 기본 설치 490건에 지하철 광고판 20건과 유튜버 협찬 30건을 더한 540건이어야 해요. 실제 설치도 540건이에요. 숫자가 맞아떨어지니, 앞에서 구한 20건과 30건이 그럴듯하다는 뜻이에요.
덧셈으로 쓰면 "그 주의 설치 = 기본 설치 490건 + 지하철 광고판 몫(걸린 주면 20건) + 유튜버 협찬 몫(영상이 올라온 뒤면 30건)"이에요. 6~7월 덧셈에 유튜버 협찬 칸이 하나 더 붙었을 뿐이에요. 누가 지하철 광고판을 봤는지, 누가 영상을 봤는지 다 알지 못해도, 장부에 남은 숫자만으로 지하철 광고판과 유튜버 협찬이 각각 몇 건씩 데려왔는지 나눈 거예요.
모르는 숫자는 어떻게 찾을까요
지금까지 기본 설치 490건, 지하철 광고판 몫 20건, 유튜버 협찬 몫 30건을 구했어요. 6~7월에는 지하철 광고판이 걸린 주끼리, 안 걸린 주끼리 평균을 내서 구했고, 8월에는 주끼리 빼서 구했죠. 둘 다 통한 건, 주마다 달라진 게 한 번에 하나뿐이었기 때문이에요.
만약 6~7월에 TikTok 광고비도 주마다 들쭉날쭉했다면 어땠을까요? 지하철 광고판이 걸린 주의 평균이 높게 나와도, 그게 지하철 광고판 때문인지 마침 그 주들에 TikTok에 돈을 더 써서인지 알 수 없어요. 실제 장부에서는 광고 여섯 개가 매주 조금씩 같이 바뀌니, 이런 일이 늘 생겨요. 그래서 MMM은 평균 대신 다른 방법을 써요. 짐작해 보고, 맞춰 보는 방법이에요. 이 방법은 광고 여섯 개가 매주 같이 바뀌어도 그대로 통해요. 다만 처음 보는 방법이니, 먼저 지하철 광고판 하나만 바뀌던 6~7월 장부로 어떻게 하는지 볼게요. 광고 여섯 개로 넓히는 건 그다음이에요.
6~7월 장부의 덧셈 "그 주의 설치 = 기본 설치 + 지하철 광고판 몫"에서, 우리가 모르는 건 두 가지예요.
- 기본 설치: 지하철 광고판이 없어도 매주 몇 건이 깔리는지
- 지하철 광고판 몫: 지하철 광고판을 걸면 몇 건이 더 깔리는지
이 둘을 모르니까, 일단 "기본 설치는 480건쯤, 지하철 광고판 몫은 30건쯤 아닐까?" 하고 짐작해 봐요. 이렇게 짐작한 한 쌍을 후보라고 부를게요. 후보가 맞다면 주마다 설치가 몇 건 나왔어야 하는지 계산할 수 있어요. 지하철 광고판이 안 걸린 주는 기본 설치만 있으니 480건, 걸린 주는 기본 설치에 지하철 광고판 몫을 더해 480 + 30 = 510건이에요. 이게 그 주의 예상이에요. 이 예상을 장부의 실제 설치와 한 주씩 비교해서, 몇 건이나 차이 나는지 세어 봐요.
쿠폰 주인 7월 1주는 빼고, 나머지 일곱 주로 해 볼게요. 먼저 후보 1(기본 설치 480건, 지하철 광고판 30건)이에요. 지하철 광고판이 안 걸린 주는 480건, 걸린 주는 510건이 예상이에요.
| 주 | 지하철 광고판 | 실제 설치 | 후보 1의 예상 | 차이 |
|---|---|---|---|---|
| 6월 1주 | 안 걸림 | 488건 | 480건 | 8건 |
| 6월 2주 | 걸림 | 512건 | 510건 | 2건 |
| 6월 3주 | 안 걸림 | 491건 | 480건 | 11건 |
| 6월 4주 | 걸림 | 509건 | 510건 | 1건 |
| 7월 2주 | 안 걸림 | 490건 | 480건 | 10건 |
| 7월 3주 | 걸림 | 511건 | 510건 | 1건 |
| 7월 4주 | 안 걸림 | 489건 | 480건 | 9건 |
| 합계 | 42건 |
지하철 광고판이 안 걸린 주마다 10건 안팎씩 어긋나요. 기본 설치를 480건으로 너무 낮게 짐작했기 때문이에요.
이번엔 후보 2(기본 설치 490건, 지하철 광고판 20건)예요. 지하철 광고판이 안 걸린 주는 490건, 걸린 주는 510건이 예상이에요.
| 주 | 지하철 광고판 | 실제 설치 | 후보 2의 예상 | 차이 |
|---|---|---|---|---|
| 6월 1주 | 안 걸림 | 488건 | 490건 | 2건 |
| 6월 2주 | 걸림 | 512건 | 510건 | 2건 |
| 6월 3주 | 안 걸림 | 491건 | 490건 | 1건 |
| 6월 4주 | 걸림 | 509건 | 510건 | 1건 |
| 7월 2주 | 안 걸림 | 490건 | 490건 | 0건 |
| 7월 3주 | 걸림 | 511건 | 510건 | 1건 |
| 7월 4주 | 안 걸림 | 489건 | 490건 | 1건 |
| 합계 | 8건 |
이번엔 어느 주든 0~2건만 어긋나요. 같은 방식으로 후보 3(기본 설치 500건, 지하철 광고판 10건)을 계산하면 합계 46건이 어긋나요. 세 후보를 모아 보면 이래요.
| 후보 | 기본 설치 | 지하철 광고판 몫 | 일곱 주 동안 차이를 다 더하면 |
|---|---|---|---|
| 후보 1 | 480건 | 30건 | 42건 |
| 후보 2 | 490건 | 20건 | 8건 |
| 후보 3 | 500건 | 10건 | 46건 |
차이가 가장 작은 후보 2, 곧 "기본 설치 490건, 지하철 광고판 20건"이 가장 그럴듯한 답이에요.
짐작해서 넣어 보고, 장부와 가장 덜 어긋나는 짐작을 고른다. MMM이 모르는 숫자를 찾는 방법이 바로 이거예요. 우리는 후보를 세 개만 넣어 봤지만, 컴퓨터는 기본 설치를 480건, 481건, 482건..., 지하철 광고판 몫을 10건, 11건, 12건...처럼 조금씩 바꿔 가며 수천, 수만 개의 후보를 넣어 봐요. 그리고 그중 장부와 가장 덜 어긋나는 후보를 골라요.
이걸 컴퓨터가 한꺼번에 하는 게 MMM이에요
이제 광고 여섯 개로 넓혀 볼게요. 앞에서 "실제 장부에서는 광고 여섯 개가 매주 조금씩 같이 바뀐다"고 했죠. 사장님의 진짜 장부가 정말 그래요. 10월 1주와 2주를 나란히 놓아 볼게요.
| 장부 | 10월 1주 | 10월 2주 | 바뀐 것 |
|---|---|---|---|
| ① 광고에 쓴 돈 | |||
| Apple 검색 | 44만원 | 46만원 | 2만원 더 씀 |
| AppLovin | 63만원 | 57만원 | 6만원 덜 씀 |
| Snapchat | 72만원 | 78만원 | 6만원 더 씀 |
| TikTok | 35만원 | 40만원 | 5만원 더 씀 |
| 지하철 광고판 | 20만원 | 20만원 | 같음 |
| ② 유튜버 영상이 보인 정도 | |||
| 그 주에 늘어난 조회수 | 8만 회 | 15만 회 | 7만 회 더 봄(새 영상) |
| ③ 결과 | |||
| 그 주 깔린 앱 | 535건 | 575건 | 40건 늘어남 |
③ 설치가 40건 늘었는데, 그 사이에 ①과 ②에서 다섯 가지가 한꺼번에 조금씩 바뀌었어요. 늘어난 40건이 유튜버 협찬 덕분인지, Snapchat 덕분인지, 줄어든 AppLovin은 얼마나 깎아 먹었는지, 이 두 주만 봐서는 알 수가 없어요. 앞의 6~8월 장부가 쉬웠던 건, 원래 광고 네 개에 매주 똑같은 돈을 썼기 때문이에요. 하지만 보통은 그렇지 않아요. 사장님은 TikTok이 잘되는 주에는 TikTok에 돈을 더 쓰고, AppLovin이 별로인 주에는 덜 써요. 그러다 보면 매주 여러 광고에 쓴 돈이 한꺼번에 조금씩 바뀌어요. 바로 위의 10월 1주와 2주도 그랬죠. 이러면 두 주를 비교해도, 설치가 무엇 때문에 늘었는지 가를 수가 없어요. 게다가 장부는 2년 치, 100주가 넘어요. 손으로 하나씩 비교하기엔 너무 많죠.
그래서 광고 여섯 개를 한 덧셈에 같이 넣고 한꺼번에 풀어요. 덧셈의 모양은 6~7월과 같은데, 한 가지가 달라져요.
6~8월에는 "지하철 광고판이 걸린 주면 20건", "영상이 올라온 뒤면 30건"처럼, 걸렸는지 안 걸렸는지만 따졌어요. 그런데 다른 광고들은 걸고 안 걸고가 아니라, 매주 쓰는 돈이 조금씩 달라요. Apple 검색은 10월 1주엔 44만원, 2주엔 46만원을 썼죠. 이런 광고까지 같이 계산하려면, 모든 광고를 한 가지 방식으로 맞춰 줘야 해요.
그 방식은 이거예요. 광고마다 "1만원 쓸 때마다 몇 건을 데려오나"를 찾아야 할 숫자로 두고, 거기에 그 주에 쓴 돈을 곱한다. 이 숫자는 아직 몰라요. 장부를 보고 찾아야 하는 숫자예요.
지하철 광고판으로 보면 쉬워요. 앞에서 지하철 광고판은 20만원을 쓴 주에 20건을 데려왔죠. 1만원에 1건꼴이에요. 그러니 "걸린 주면 20건, 안 걸린 주면 0건"이라고 쓰는 대신 "1만원마다 1건"이라고 써도 똑같아요. 20만원을 쓴 주는 20건, 한 푼도 안 쓴 주는 0건이 되니까요.
이렇게 "1만원마다 몇 건"으로 쓰면, Apple 검색처럼 매주 쓰는 돈이 조금씩 다른 광고도 똑같이 계산할 수 있어요. Apple 검색이 1만원마다 몇 건을 데려오는지만 알면, 44만원을 쓴 주든 46만원을 쓴 주든 쓴 돈에 곱해서 그 주의 몫을 구할 수 있으니까요. 광고마다 "1만원마다 몇 건을 데려오는지", 바로 이게 우리가 장부에서 찾아야 하는 숫자예요.
유튜버 협찬도 마찬가지예요. 다만 유튜버 협찬은 장부에 쓴 돈 대신 그 주에 늘어난 조회수를 적었으니, 돈 대신 조회수를 곱해요. "조회수 1만 회마다 설치 몇 건"이요. 영상이 올라오기 전엔 조회수가 0이니 유튜버 협찬 몫도 0건이고, 영상이 올라와 조회수가 늘어난 주엔 그만큼 몫이 생겨요.
이제 광고 여섯 개를 전부 같은 방식으로 넣을 수 있어요. 광고마다 "그 주에 쓴 돈(유튜버 협찬은 조회수) × 1만원(유튜버 협찬은 1만 회)당 설치 몇 건"이에요.
이렇게 광고 여섯 개를 다 넣으면 덧셈이 이렇게 돼요.
그림 아래쪽 두 칸(특이 사항 몫, 계절 몫)은 앞에서 본 것들이에요. 앞에서는 경쟁 앱이 쿠폰을 뿌린 주에 40건이 빠지고, 12월에는 30건이 더해진다고 했죠. 실제로는 이 숫자들도 처음엔 몰라요. 광고 몫처럼 장부를 보고 찾아야 해서, 여기에도 ?를 붙였어요.
덧셈의 모양은 정했어요. 그런데 문제가 하나 있어요. 광고마다 "1만원당 몇 건"인지를 아직 몰라요. 앞에서 지하철 광고판을 1만원당 1건이라고 예로 들었지만, 그건 지하철 광고판만 움직이던 6~7월 장부라서 구할 수 있었어요. 나머지 광고는 아직 모르고, 광고를 전부 꺼도 생겼을 설치가 몇 건인지도 몰라요.
10월 2주 장부에 덧셈을 그대로 적어 보면, 아는 칸과 모르는 칸이 이렇게 나뉘어요. 아는 건 그 주에 쓴 돈과 실제로 깔린 575건이고, 모르는 건 ?로 적었어요.
| 10월 2주 | 그 주에 쓴 돈(조회수) | 모르는 것 | 그 광고의 몫 |
|---|---|---|---|
| 광고 없이도 깔렸을 설치 | 없음 | ?건 | ?건 |
| Apple 검색 | 46만원 | 1만원당 ?건 | 46 × ?건 |
| AppLovin | 57만원 | 1만원당 ?건 | 57 × ?건 |
| Snapchat | 78만원 | 1만원당 ?건 | 78 × ?건 |
| TikTok | 40만원 | 1만원당 ?건 | 40 × ?건 |
| 지하철 광고판 | 20만원 | 1만원당 ?건 | 20 × ?건 |
| 유튜버 협찬 | 15만 회 | 조회수 1만 회당 ?건 | 15 × ?건 |
| 합계 | 575건이 돼야 해요 |
?를 다 채우면, 맨 오른쪽 몫을 다 더한 게 실제 설치 575건과 맞아야 해요. 10월 2주는 쿠폰도 없고 계절 차이도 없던 주여서, 특이 사항 몫과 계절 몫은 0이라 표에서 뺐어요.
?를 다 알면 575건을 광고마다 나눌 수 있어요. 문제는 ?를 모른다는 거예요. 그런데 이런 표가 한 주에 하나씩, 장부에 100주 치가 있어요. 주마다 광고비와 설치는 다르지만, ?에 들어갈 숫자는 매주 같다고 칠게요. 광고 자체는 그대로인데, 지하철 광고판이 1만원당 데려오는 설치가 이번 주엔 1건, 다음 주엔 5건처럼 크게 바뀔 리는 없으니까요. 물론 이건 처음 출발점이에요. 효과가 다음 주까지 남는 경우나, 돈을 많이 쓸수록 1만원당 건수가 줄어드는 경우는 뒤에서 이 덧셈을 조금 고쳐서 다룰게요.
?를 찾는 방법은 6~7월에 후보를 넣어 본 것과 똑같아요. 다만 ?가 많으니, 이번엔 이 일을 전부 컴퓨터가 해요.
- 컴퓨터가 ? 일곱 개 전부에 숫자를 하나씩 짐작해서 넣어요. 예를 들어 "광고를 전부 꺼도 생겼을 설치는 350건, Apple 검색은 1만원당 0.5건, AppLovin은 1만원당 1건..."처럼요.
- 그 짐작대로 장부 100주의 설치를 한 주씩 계산해요.
- 계산한 설치와 실제 설치가 주마다 몇 건씩 차이 나는지 다 더해요.
- 짐작을 조금 바꿔서 1~3을 다시 해요.
이걸 수없이 반복해서, 차이를 다 더한 값이 가장 작은 짐작을 골라요. 6~7월과 다른 건 모르는 숫자의 개수뿐이에요. 6~7월에는 기본 설치와 지하철 광고판 몫, 두 개만 짐작하면 됐어요. 10월 장부에서는 위 표처럼 일곱 개를 한꺼번에 짐작해야 해요(광고를 전부 꺼도 생겼을 설치 하나, 광고 여섯 개의 "1만원당 몇 건" 여섯 개. 쿠폰이나 계절 몫까지 넣으면 그보다 많아요). 그래서 손 대신 컴퓨터가 해요.
지금까지 한 일을 한 번에 정리하면, 이게 바로 MMM이에요.
MMM(Marketing Mix Modeling, 마케팅 믹스 모델링)은 이렇게 해요.
- 매주 광고마다 쓴 돈(유튜버 협찬은 조회수)과 그 주에 깔린 앱 수를 장부로 모아요.
- 그 주의 설치를 "광고를 전부 꺼도 생겼을 설치 + 광고마다의 몫 ± 쿠폰이나 계절 같은 일의 몫"이라는 덧셈으로 나눠요.
- 덧셈에 들어갈 모르는 숫자(광고마다 1만원당 몇 건 등)는, 짐작해서 넣어 보고 장부와 가장 덜 어긋나는 숫자를 골라요.
누가 광고를 봤는지 기록이 없어도, 장부만 있으면 광고마다 몇 건을 데려왔는지 알 수 있어요. 설치 대신 매출로 해도 방법은 같아요.
MMM이 MMP 리포트와 가장 다른 점은 여기 있어요. 리포트는 누가 어떤 광고를 눌렀는지 이어 붙여야 설치를 셀 수 있어서, 지하철 광고판을 보고 QR을 찍지 않고 지나간 사람이나 영상만 보고 나중에 검색한 사람, 그리고 iPhone에서 추적을 거절한 사람의 설치는 놓치기 쉬워요. MMM은 그 주에 앱스토어에서 깔린 앱 수 전체를 놓고 나누니까, 링크를 눌렀든 안 눌렀든, 추적을 허용했든 거절했든 모든 설치를 광고마다의 몫으로 나눌 수 있어요.
이제 앞에서 6~7월 장부로 찾은 "기본 설치 490건"을 다시 떠올려 볼게요. 그때 덧셈에는 지하철 광고판 몫만 들어 있었고, 원래 광고 네 개의 몫은 따로 넣지 않았어요. 매주 같은 돈을 써서 주마다 달라지는 게 없었으니까요. 그래서 원래 광고 네 개가 매주 데려온 설치도 490건 안에 같이 들어갔어요. 490건은 "광고가 하나도 없어도 깔렸을 설치"가 아니라, "지하철 광고판이 없어도 깔렸을 설치"였던 거예요. 그 안에는 두 가지가 섞여 있어요.
- 원래 광고 네 개(Apple 검색, AppLovin, Snapchat, TikTok)가 데려온 설치
- 광고가 하나도 없어도 깔렸을 설치
6~7월에는 이 둘을 나눌 수가 없었어요. 원래 광고 네 개에 매주 똑같은 돈을 써서, "원래 광고가 몇 건을 데려왔는지" 알 단서가 없었거든요.
위에서 컴퓨터가 ?를 찾을 때는 6~7월 때와 두 가지가 달랐어요. 지하철 광고판뿐 아니라 원래 광고 네 개와 유튜버 협찬까지 광고마다 칸이 하나씩 있었고, 장부도 6~7월 여덟 주가 아니라 2년 치, 100주가 넘는 장부를 통째로 썼죠. 2년 동안은 광고마다 매주 쓴 돈(유튜버 협찬은 조회수)이 조금씩 달랐기 때문에, 컴퓨터가 여섯 광고의 "1만원당 몇 건"을 다 같이 찾을 수 있어요. 그러면 광고 여섯 개의 몫을 전부 따로 빼낼 수 있고, 마지막에 남는 게 "광고가 하나도 없어도 깔렸을 설치"예요.
예를 들어 컴퓨터가 ?를 다 찾아서, 10월 2주에 광고마다 몇 건을 데려왔는지가 아래처럼 나왔다고 해 볼게요. 그 주의 설치 575건에서 광고마다의 몫을 하나씩 빼 보면 이래요.
- 그 주의 설치: 575건
- 원래 광고 네 개의 몫: Apple 검색 15건, AppLovin 48건, Snapchat 62건, TikTok 40건, 합쳐서 165건
- 지하철 광고판 몫: 20건
- 유튜버 협찬 몫: 45건
- 다 빼고 남는 설치: 575 − 165 − 20 − 45 = 345건
광고 여섯 개의 몫을 다 덜어 내고 남은 이 345건이 광고 없이도 생겼을 설치예요. 광고 여섯 개를 전부 꺼도 사라지지 않았을 설치죠. 거꾸로 광고마다의 몫(예를 들어 유튜버 협찬 45건)은, 맨 앞에서 본 "광고가 만든 설치"와 같은 뜻이에요. 그 광고를 껐다면 사라졌을 설치요.
이 345건은 앞에서 본 MMP 리포트의 오가닉과는 다른 숫자예요. 둘 다 "광고 몫이 아닌 설치"처럼 보이지만, 무엇을 세느냐가 달라요.
- 리포트의 오가닉: "광고 기록이 없는 설치"예요. 광고를 정말 안 보고 깐 설치에, 광고를 보고 깔았는데 기록만 안 남은 설치까지 섞여 있어요.
- MMM의 345건: "광고가 없었어도 깔렸을 설치"예요. 광고 덕분에 깔린 설치는 기록이 있든 없든 그 광고의 몫으로 빠지고, 정말 광고 없이도 깔았을 설치만 남아요.
예를 들어 출근길에 지하철 광고판을 보고 저녁에 앱 이름을 검색해서 깐 사람은, 리포트에서는 오가닉으로 찍히지만 MMM에서는 지하철 광고판 몫으로 들어가요.
덧셈 자체는 지금까지 본 것처럼 어렵지 않아서, 이 계산을 컴퓨터에 시키는 프로그램을 직접 짤 수도 있어요. 하지만 그럴 필요도 없어요. 장부만 넣으면 짐작하고 맞춰 보는 계산까지 다 해 주는 무료 도구가 이미 잘 만들어져 있거든요. Google이 공개한 Meridian, Meta가 공개한 Robyn이 대표적이에요.
광고 효과는 늦게 오기도 해요
앞의 6~7월 장부에서는 계산을 쉽게 하려고 한 가지를 단순하게 쳤어요. 지하철 광고판을 건 주에는 지하철 광고판 덕분에 깔 사람이 그 주에 다 깔고, 지하철 광고판을 뗀 주에는 지하철 광고판 덕분에 까는 사람이 한 명도 없다고요. 실제로는 그렇지 않아요.
월요일 출근길에 지하철 광고판을 본 사람이 그날 바로 앱을 깔 수도 있지만, 꼭 그렇지는 않아요. 며칠 동안 오가며 몇 번 더 보다가, 토요일 저녁 피자가 생각나서 깔 수도 있어요. 지하철 광고판을 건 주가 지나도 효과가 남아 있는 거예요. 유튜버 영상은 더해요. 영상이 올라간 주에 다 보는 게 아니라, 몇 주에 걸쳐 조회수가 쌓이면서 설치도 같이 이어져요. 이렇게 광고를 한 뒤에도 효과가 남아 있는 걸 잔존 효과(adstock)라고 해요.
지하철 광고판을 딱 한 주만 걸었다고 해볼게요. 그 효과가 지하철 광고판을 건 주에 10건, 다음 주에 6건, 그다음 주에 4건 나왔어요.
지하철 광고판을 건 주만 보면 10건이지만, 3주에 걸쳐 모두 20건이에요. 지하철 광고판을 계속 걸어 두면 지난주, 지지난주에 건 지하철 광고판의 남은 효과가 이번 주에 겹쳐서, 3주째부터는 매주 20건쯤이 나와요. 한 달이면 80건쯤이고요.
이걸 모르고 계산하면 문제가 생겨요. 지하철 광고판을 뗀 첫 주에도 지난 지하철 광고판 덕분에 10건(6 + 4)이 더 깔리고, 그다음 주에도 4건이 더 깔려요. 장부만 보면 "지하철 광고판을 뗐는데 설치가 별로 안 줄었네" 싶어서 지하철 광고판 효과가 실제보다 작아 보여요. 게다가 지하철 광고판을 뗀 바로 그 주에, 마침 TikTok 광고비를 늘렸다고 해 볼게요. 그 주에 더 깔린 10건은 사실 지난주까지 건 지하철 광고판 덕분이에요. 그런데 효과가 남는다는 걸 모르면, "이번 주에 늘어난 건 TikTok이니 이 10건도 TikTok 덕분이구나" 하고 TikTok 몫으로 쳐 버려요. 그러면 TikTok은 실제보다 잘하는 것처럼 보이죠.
그래서 MMM은 덧셈을 조금 바꿔요. 앞에서 6~7월 장부로 세운 덧셈은 이랬어요.
여기서 "지하철 광고판 몫"은 이번 주에 걸린 지하철 광고판만 따졌어요. 이 칸 하나를 세 칸으로 나눠요.
지난주, 지지난주에 건 지하철 광고판이 이번 주에도 설치를 데려오니까, 그 몫을 받을 칸을 따로 만들어 준 거예요. 나머지 칸(기본 설치, 쿠폰 몫)은 그대로예요.
위 그림의 숫자(10건, 6건, 4건)를 넣어 보면 이래요. 지하철 광고판을 몇 주째 계속 걸어 둔 주라면, 이번 주에 깔린 지하철 광고판 몫은 세 군데서 와요.
| 어디서 온 설치 | 건수 |
|---|---|
| 이번 주에 건 지하철 광고판 | 10건 |
| 지난주에 건 지하철 광고판이 남긴 것 | 6건 |
| 지지난주에 건 지하철 광고판이 남긴 것 | 4건 |
| 이번 주 지하철 광고판 몫 | 20건 |
지하철 광고판을 막 뗀 주라면, 이번 주에 건 게 없으니 첫 줄이 0건이 돼요. 그래도 지난주와 지지난주에 건 것이 남긴 6건과 4건이 있어서, 지하철 광고판 몫은 10건이에요.
10건, 6건, 4건은 이해를 돕기 위해 정한 숫자예요. 실제로는 이것도 모르는 숫자예요. 앞의 10월 2주 표처럼, 바꾼 덧셈의 칸마다 모르는 숫자를 ?로 적어 보면 이래요.
| 덧셈의 칸 | 몇 건 |
|---|---|
| 기본 설치 | ?건 |
| + 이번 주에 건 지하철 광고판의 몫 | ?건 |
| + 지난주에 건 지하철 광고판이 남긴 몫 | ?건 |
| + 지지난주에 건 지하철 광고판이 남긴 몫 | ?건 |
| − 쿠폰 몫 | ?건 |
| = 그 주의 설치 | 장부에 적힌 실제 숫자 |
?를 찾는 방법도 앞과 똑같아요. 짐작해서 넣어 보고, 장부와 가장 덜 어긋나는 짐작을 골라요. 예를 들어 후보 두 개를 넣어 볼게요.
| 후보 | 이번 주에 건 것 | 지난주 것이 남긴 것 | 지지난주 것이 남긴 것 | 막 뗀 주의 예상 |
|---|---|---|---|---|
| 후보 A: 효과가 그 주에 끝남 | 20건 | 0건 | 0건 | 기본 설치 그대로 |
| 후보 B: 3주에 걸쳐 남음 | 10건 | 6건 | 4건 | 기본 설치보다 10건 많음 |
두 후보는 지하철 광고판을 계속 걸어 둔 주에는 둘 다 20건이라 똑같이 맞아요. 차이는 막 뗀 주에서 나요. 장부를 보니 지하철 광고판을 막 뗀 주에도 기본 설치보다 10건쯤 더 깔렸다면, 후보 B가 더 잘 맞는 거예요.
"3주까지 남는다"는 것도 예로 든 가정일 뿐이에요. 누르면 바로 깔리는 광고는 1주면 끝날 수도 있고, 지하철 광고판이나 유튜버 영상은 4주, 5주까지 남을 수도 있어요. 그래서 컴퓨터는 "1주만 남는다", "2주 남는다", "3주 남는다" 같은 후보까지 하나씩 넣어 보고, 장부와 가장 덜 어긋나는 쪽을 골라요.
그래서 지하철 광고판과 유튜버 협찬은 몇 건을 데려왔을까요
이제 사장님의 처음 질문으로 돌아갈게요. 사장님은 위의 10월 1주 장부처럼 매주 적어 둔 장부를 2년 치 전부 모아서 MMM 도구에 넣었어요.
그랬더니 10월 네 주의 설치가 이렇게 나뉘었어요.
맨 아래 회색이 광고 없이도 생겼을 설치예요. 그 위로 광고별 몫이 쌓여 있어요. 리포트에서는 거의 안 보이던 지하철 광고판과 유튜버 협찬 몫이 처음으로 보여요.
두 번째 막대가 앞에서 계산해 본 10월 2주예요. 575건 가운데 회색 345건이 광고 없이도 생겼을 설치이고, 나머지 230건이 광고 몫이에요. 유튜버 협찬 몫(분홍)이 45건으로 다른 주보다 큰 건, 그 주에 새 영상이 올라왔기 때문이에요.
그림의 네 주를 광고마다 더하면 10월 한 달 숫자가 나와요. 그림에는 막대로만 그렸지만 숫자로 보면, 지하철 광고판은 네 주 모두 20건씩이라 더하면 80건이에요. 유튜버 협찬은 1주 25건, 2주 45건, 3주 35건, 4주 15건이라 더하면 120건이고요. 이렇게 구한 한 달 숫자를 MMP 리포트와 나란히 놓으면 이래요. 마지막 두 칸은 설치 1건에 돈이 얼마 들었는지예요. 한 달 광고비를 MMP 리포트 숫자로 나누면 리포트 기준, MMM 숫자로 나누면 그 광고가 진짜로 만든 설치 1건에 든 돈이에요. 지하철 광고판이라면 리포트 기준으로는 80만원 ÷ 10건 = 8만원, MMM 기준으로는 80만원 ÷ 80건 = 1만원이에요.
| 광고와 한 달 광고비 | MMP 리포트 | MMM | 1건에 든 돈(MMP) | 1건에 든 돈(MMM) |
|---|---|---|---|---|
| Apple 검색 180만원 |
650건 | 60건 | 약 2,800원 | 3만원 |
| AppLovin 240만원 |
400건 | 200건 | 6,000원 | 12,000원 |
| Snapchat 300만원 |
300건 | 240건 | 1만원 | 12,500원 |
| TikTok 150만원 |
100건 | 150건 | 15,000원 | 1만원 |
| 지하철 광고판 80만원 |
10건 | 80건 | 8만원 | 1만원 |
| 유튜버 협찬 180만원 |
20건 | 120건 | 9만원 | 15,000원 |
| 오가닉(리포트) / 광고 없이도 생겼을 설치(MMM) | 720건 | 1,350건 | ||
| 합계 | 2,200건 | 2,200건 |
전체 2,200건은 같아요. 같은 2,200건을 두 방법이 다르게 나눴을 뿐이에요.
- 지하철 광고판: 리포트 10건, MMM 80건이에요. 1건에 든 돈도 리포트로는 8만원이지만 MMM으로는 1만원이라, 여섯 광고 중 가장 싼 축이에요. 리포트만 보고 뗐다면 손해였을 거예요.
- 유튜버 협찬: 리포트 20건, MMM 120건이에요. 1건에 든 돈은 리포트로는 9만원이라 당장 끊어야 할 광고처럼 보이지만, MMM으로는 1만 5,000원이에요.
- Apple 검색: 리포트에선 650건으로 가장 많았지만 MMM으로는 60건이에요. 1건에 든 돈도 약 2,800원에서 3만원으로 바뀌어, 여섯 광고 중 가장 비싼 광고가 돼요. 리포트에 찍힌 설치 가운데 상당수가 원래 깔 생각으로 검색한 사람이거나, 다른 광고를 보고 나중에 검색한 사람이었기 때문이에요.
- TikTok: 반대로 리포트(100건)보다 MMM(150건)이 커요. TikTok 광고를 보고 며칠 뒤 앱 이름을 검색해서 Apple 검색 광고를 눌러 깐 사람은 리포트에서 Apple 검색 몫으로 찍히지만, MMM은 이런 설치를 TikTok 몫으로 돌려줘요.
- 광고 없이도 생겼을 설치 1,350건: 10월 설치 2,200건에서 MMM이 나눈 광고 여섯 개의 몫(60 + 200 + 240 + 150 + 80 + 120 = 850건)을 빼고 남은 숫자예요. 광고를 하나도 안 했어도 10월에 깔렸을 설치죠.
80건과 120건은 얼마나 정확할까요
사장님은 바로 지하철 광고판과 유튜버 협찬 예산을 늘리고 싶어졌어요. 그 전에 짚어 볼 게 있어요.
앞의 비교표에는 지하철 광고판 80건, 유튜버 협찬 120건처럼 숫자를 하나씩 적었어요. 그런데 Meridian 같은 MMM 도구는 보통 답을 숫자 하나가 아니라 범위로 보여줘요. "가장 그럴듯한 값은 80건인데, 아마 30~130건 사이에 있을 거예요" 하는 식이에요. 범위가 넓을수록 도구도 확신이 없다는 뜻이에요. 사장님이 받은 결과는 이랬어요.
| 광고 | 한 달에 데려온 설치(MMM 도구가 알려 준 범위) |
|---|---|
| 지하철 광고판 | 30~130건 |
| 유튜버 협찬 | 50~190건 |
범위가 이렇게 넓은 건 기록이 짧아서예요. 원래 광고 네 개는 2년 치 장부가 있지만, 지하철 광고판은 6월부터 스무 주 남짓, 유튜버 협찬은 8월 3주부터 열 주뿐이에요. 장부가 짧으면 "60건이 맞다"와 "100건이 맞다"를 가려 줄 단서가 부족해요. 기록이 쌓일수록 범위는 좁아져요. 그만큼 답에 더 확신이 생긴다는 뜻이에요. 그래서 MMM 도구들도 기록을 넉넉히 모으라고 권해요. Robyn은 주 단위 기록을 적어도 2년 치(Robyn 문서), Meridian은 사장님 장부처럼 전국 숫자를 한 줄로 합쳐 적은 장부라면 최소 3년 치를 권해요(Meridian 문서). 서울, 부산처럼 지역마다 장부를 따로 적으면 같은 기간에도 단서가 늘어나서, 2년 치면 된대요.
그런데 범위가 30~130건이면 사장님은 결정을 내리기가 어려워요. 지하철 광고판에는 한 달 80만원을 쓰니까, 설치 1건에 드는 돈을 계산해 보면 이래요.
- 지하철 광고판이 한 달 30건을 데려왔다면: 80만원 ÷ 30건, 1건에 2만 7,000원쯤이에요. 여섯 광고 중 가장 비싼 Apple 검색(1건에 3만원)과 거의 비슷하게 비싼 광고예요.
- 지하철 광고판이 한 달 130건을 데려왔다면: 80만원 ÷ 130건, 1건에 6,000원쯤이에요. 여섯 광고 중 가장 싼 광고예요.
같은 지하철 광고판인데, 범위의 어느 끝이냐에 따라 "줄여야 할 광고"도 되고 "늘려야 할 광고"도 되는 거예요. 그렇다고 기록이 2년 치 쌓일 때까지 기다리자니, 앞으로 1년 반 넘게 결정을 미뤄야 해요.
기록이 쌓이기를 마냥 기다릴 수 없을 때, 범위를 빨리 좁히는 방법이 있어요. 실험이에요. 실험으로 지하철 광고판이 몇 건을 데려오는지 직접 재서, 그 숫자를 MMM에 알려 주는 거예요. 마침 사장님은 9월에 지하철 광고판으로 실험을 하나 해 뒀어요. 앞에서 "역을 나누는 방법"으로 봤던 지역 실험이에요.
- 어떻게 했나: 여섯 역 가운데 세 곳을 랜덤으로 골라, 9월 한 달 동안 지하철 광고판을 뗐어요. 나머지 세 곳은 그대로 뒀어요.
- 설치는 어떻게 셌나: 지하철 광고판을 뗀 세 역 근처 동네와, 그대로 둔 세 역 근처 동네의 설치를 따로 셌어요. 앱스토어는 동네별 설치를 알려 주지 않으니, 앱에서 첫 주문을 넣은 배달 주소로 어느 동네 사람이 깔았는지 나눴어요.
- 결과는: 지하철 광고판을 뗀 동네에서 한 달에 40건쯤 설치가 덜 나왔어요. 세 곳에서 40건쯤이니, 여섯 곳이면 80건쯤이라고 볼 수 있어요.
Meridian이나 Robyn에는 이런 실험 결과를 적어 넣는 칸이 있어요. 사장님은 여기에 "지하철 광고판은 한 달 80건쯤"을 적고 MMM을 다시 돌렸어요. 그러면 도구가 장부와도 맞고 실험 결과와도 맞는 답을 찾아 줘서, 범위가 30~130건에서 65~95건으로 좁아져요. 이렇게 실험으로 잰 숫자를 MMM에 같이 넣어서, MMM의 답이 실험 결과와 크게 어긋나지 않도록 바로잡는 걸 캘리브레이션(calibration)이라고 해요. 범위가 좁아지면 결정하기도 훨씬 쉬워져요. 30~130건일 때는 1건에 드는 돈이 6,000원에서 2만 7,000원까지 벌어졌지만, 65~95건이면 8,000원에서 1만 2,000원쯤 사이예요. 어느 쪽이든 싼 광고라, 줄일 광고는 아니라고 자신 있게 말할 수 있어요.
지하철 광고판만 그런 건 아니에요. 다른 광고도 실험할 수 있으면, 그 결과를 같이 넣어 줄수록 MMM의 답이 정확해져요. 특히 Apple 검색 광고처럼 장부만 보고는 착각하기 쉬운 광고에 도움이 많이 돼요. 검색 광고는 피자를 찾는 사람이 많은 주에 설치도 늘고 광고비도 저절로 같이 늘어서, 장부만 보면 광고가 설치를 만든 것처럼 보이기 쉽거든요.
유튜버 협찬은 지역 실험을 할 수 없어요. 그래서 사장님은 유튜버 협찬 예산은 당장 늘리지 않고, 몇 달 더 기록을 쌓아서 범위가 좁아지기를 기다리기로 했어요.
지하철 광고판을 두 배로 늘리면, 설치도 두 배가 될까요
지하철 광고판이 1건에 1만원꼴이라는 걸 알게 된 사장님은 역을 여섯 곳에서 열두 곳, 열여덟 곳으로 늘려 볼까 생각했어요. 한 달 80만원으로 80건이면, 160만원이면 160건, 240만원이면 240건이 나올까요?
보통은 안 그래요. 사장님은 처음 여섯 곳을 고를 때 가게와 가장 가깝고 사람이 가장 많은 역부터 골랐어요. 역을 늘리면 점점 가게에서 멀고, 사장님 피자를 시킬 일이 적은 사람들이 지나가는 역까지 가게 돼요. 그러니 같은 돈을 더 써도 늘어나는 설치가 점점 줄어요. 이렇게 광고비를 늘릴수록 늘어나는 설치가 줄어드는 걸 포화(saturation)라고 해요. 온라인 광고도 마찬가지예요. TikTok 같은 광고 플랫폼은 앱을 깔 것 같은 사람에게 먼저 광고를 보여주니까, 광고비를 늘리면 점점 관심이 적은 사람에게까지 보여주게 돼요.
그럼 MMM은 광고비를 늘릴수록 설치가 얼마나 덜 늘어나는지를 어떻게 알아낼까요? 앞에서 광고 칸은 "그 주에 쓴 돈 × 1만원당 ?건"이었어요. 그리고 이 ?는 돈을 얼마나 쓰든 늘 같은 숫자 하나라고 쳤죠. 지하철 광고판이라면 20만원을 써도, 60만원을 써도 1만원당 1건이요.
포화를 넣으려면 이 ?가 쓴 돈에 따라 달라지게 바꿔요. 처음 쓰는 돈은 1만원당 ?건을 데려오고, 돈을 더 쓸수록 1만원이 데려오는 건수가 조금씩 줄어드는 식으로요. 그러면 모르는 숫자가 두 개가 돼요.
- 처음에는 1만원당 몇 건을 데려오나
- 돈을 더 쓸수록 그 건수가 얼마나 빨리 줄어드나
이 둘도 앞에서 ?를 찾던 방법 그대로 찾아요. 덧셈에서 지하철 광고판 몫을 계산하는 자리에 휘는 모양의 후보를 하나 넣고, 그 덧셈으로 장부의 매주 설치를 계산해 봐요. 그리고 실제 설치와 얼마나 어긋나는지 다 더해요. 후보를 바꿔 가며 이걸 되풀이해서, 가장 덜 어긋나는 후보를 골라요. 달라진 건 지하철 광고판 몫을 계산하는 자리에 ?가 두 개 들어 있다는 것뿐이에요.
이것도 직접 할 필요는 없어요. Meridian이나 Robyn 같은 MMM 도구는 "돈을 더 쓸수록 1만원당 건수가 줄어든다"는 걸 처음부터 계산에 넣어 두었어요. 그래서 따로 설정하지 않아도, 광고마다 얼마나 빨리 줄어드는지까지 알아서 찾아 줘요.
지하철 광고판은 이렇게 나왔다고 해볼게요.
- 처음 80만원(여섯 곳): 80건이에요. 1만원당 1건이죠.
- 다음 80만원(열두 곳까지): 48건이 더 늘어서 128건이에요. 1만원당 0.6건으로 줄었어요.
- 그다음 80만원(열여덟 곳까지): 24건이 더 늘어서 152건이에요. 1만원당 0.3건밖에 안 돼요.
돈을 더 쓸수록 1만원이 데려오는 설치가 줄어드는 거예요.
그런데 여기서 조심할 게 하나 있어요. 사장님 장부에는 지하철 광고판에 한 달 80만원(여섯 곳)까지 쓴 기록밖에 없어요. 160만원이나 240만원을 써 본 적은 한 번도 없죠.
그러니 위의 숫자 가운데 장부에서 직접 확인한 건 "80만원에 80건"뿐이에요. "160만원에 128건", "240만원에 152건"은 실제로 써 보고 얻은 숫자가 아니에요. MMM이 80만원까지의 기록을 보고 "이런 모양으로 점점 덜 늘어나겠구나" 하고 곡선을 이어 그려 본 짐작이에요. 다른 광고들도 대체로 이렇게 휘어 가니까 그럴듯한 짐작이긴 하지만, 맞는지는 실제로 열두 곳까지 늘려 봐야 알 수 있어요.
이 짐작대로라면, 지하철 광고판을 열두 곳으로 늘릴 때 새로 늘린 80만원은 1만원당 0.6건이니, 설치 1건에 1만 7,000원쯤 들 것으로 보여요. 유튜버 협찬(1만 5,000원)과 비슷하고 Apple 검색(3만원)보다는 싸니, 해 볼 만해요. 그런데 열여덟 곳까지 늘리면 그다음 80만원은 1만원당 0.3건이라 1건에 3만 3,000원쯤으로, Apple 검색보다 비싸질 것으로 보여요.
그래서 사장님은 11월부터 지하철 광고판을 열두 곳까지만 늘리기로 했어요. 그 돈은 Apple 검색 광고비에서 덜어 오기로 했고요. Apple 검색은 지금 1건에 3만원이 드는, 여섯 광고 중 가장 비싼 광고니까요. 쓰는 돈은 그대로인데 설치는 늘어나는 쪽으로 옮긴 거예요. 다만 "열두 곳이면 한 달 128건"은 써 보지 않고 짐작한 숫자예요. 그래서 몇 달 뒤에 MMM을 다시 돌려서, 새로 늘린 여섯 곳이 정말 48건쯤을 더 데려왔는지 확인하기로 했어요.
마무리
누가 봤는지 기록이 일부만 남거나 아예 남지 않는 광고도 효과를 잴 수 있어요. 사람을 하나하나 따라가는 대신, 주마다 광고에 쓴 돈과 주마다 앱이 깔린 건수를 나란히 놓고 보면 돼요. 이 글에서 본 MMM이 하는 일을 정리하면 네 가지예요.
- 한 주의 설치를 몫별로 나눠요. 한 주 동안 깔린 앱을 "광고가 없어도 깔렸을 설치", "광고마다 데려온 설치", "쿠폰이나 계절 때문에 늘거나 준 설치"로 나눠서, 이걸 다 더하고 빼면 그 주에 실제로 깔린 앱 수가 되게 해요.
- 덧셈에 들어갈 모르는 숫자는 맞춰 보며 찾아요. 광고마다 1만원당 몇 건인지는 모르니, 숫자를 넣어 보고 장부 전체와 가장 덜 어긋나는 숫자를 골라요.
- 광고의 성질을 덧셈에 넣어요. 효과가 늦게 오는 것(잔존 효과)과, 많이 쓸수록 덜 늘어나는 것(포화)이에요.
- 답을 범위로 알려 줘요. Meridian이나 Robyn 같은 도구는 숫자 하나 대신 "이 사이쯤"이라는 범위로 답을 보여 줘요. 장부가 짧으면 범위가 넓고, 기록이 더 쌓이거나 실험 결과를 같이 넣으면 좁아져요.
사장님처럼 해 보고 싶다면, 광고마다 쓴 돈과 주마다 앱이 깔린 건수, 쿠폰이나 앱 순위 변화 같은 특이 사항을 주 단위로 꾸준히 적어 두는 것부터 시작하면 돼요. 계산은 Meridian이나 Robyn 같은 도구가 해 주니까요.
사장님은 이제 매달 MMP 리포트 옆에 MMM 표를 하나 더 놓고 봐요. 리포트는 기록이 남은 설치를 마지막에 누른 광고에 나눠 주고, MMM은 주 단위 장부를 보고, 추적이 잘 안 되는 지하철 광고판과 유튜버 협찬까지 광고마다 몇 건을 데려왔는지 나눠 줘요. 10월 리포트를 처음 열었을 때, 사장님은 "1건에 8만원이면 지하철 광고판을 떼야 하나?" 하고 고민했어요. 리포트만 믿었다면 그대로 뗐을 거예요. 매주 적은 장부를 MMM 도구에 넣어 광고마다 몇 건을 데려왔는지 나눠 보니, 답은 반대였어요. 지하철 광고판은 떼야 할 광고가 아니라, 오히려 늘려 볼 만한 광고였죠. 누가 봤는지 다 몰라도, 매주 쓴 돈과 매주 깔린 앱 수를 꾸준히 적어 두면 이런 판단을 할 수 있어요. 그게 MMM이에요.