예약이 꽉 찬 기간의 검색광고 실험에서 잴 것

예약 수 대신 예약 희망 연락으로 재는 실험

예약 수로 실험을 판정하면 어느 쪽이 나았는지 가릴 수 없습니다. 두 광고안을 견주는 실험에서 한쪽이 예약 희망 연락을 두 배로 데려왔더라도, 빈 칸이 이미 다 찼다면 두 쪽의 예약 수는 똑같이 나옵니다. 이 결과를 두 광고안이 같았다고 읽으면, 실제로는 나았던 광고안을 버리게 됩니다.

반대로 꽉 찬 기간에는 광고가 조금만 나빠도 예약 수가 줄지 않아, 나빠진 광고안을 그대로 두게 되기도 합니다. 빈 칸이 모자라 누가 와도 예약이 차는 기간에는 광고의 좋고 나쁨이 예약 수에 드러나지 않으므로, 예약 수는 이 기간 광고의 성적표 노릇을 하지 못합니다.

이 기간에 받을 수 있는 양에 맞춰 광고를 줄일지 유지할지는 따로 정할 일이고, 이 판단에서는 실험을 이미 하기로 했거나 하고 있을 때 무엇을 잴지만 다룹니다. 실험을 멈출지는 광고비와 대기 문의를 감당할 수 있는지로 원장이 정합니다.

꽉 찬 기간에 잴 네 가지 숫자

네 가지 표의 첫째 줄에서 예약 희망 연락은 예약을 원한다고 말한 연락입니다. 원무팀장이 접수에서 예약을 원했는데 빈 칸이 없어 잡지 못한 연락과 잡은 연락을 모두 이 줄에 넣습니다. 광고가 사람을 얼마나 데려왔는지는 이 숫자가 보여 줍니다.

둘째 줄의 대기로 돌린 연락은 예약 희망 가운데 빈 칸이 없어 대기 명단에 올리거나 다른 날로 미룬 연락입니다. 이 숫자가 클수록 예약 수가 광고의 결과를 가린 정도가 크다는 뜻입니다. 셋째 줄의 빈 칸 수는 원무팀장이 주마다 한 번 예약표에서 세어, 실험 기간이 얼마나 꽉 차 있었는지를 남깁니다.

넷째 줄의 예약 수를 표에서 빼지 않는 것은, 병원이 실제로 받은 예약이 얼마인지는 여전히 알아야 하기 때문입니다. 다만 이 숫자는 광고안 사이의 차이를 가리는 데가 아니라, 꽉 찬 정도와 함께 그 기간 병원이 얼마나 일했는지를 남기는 데 씁니다.

꽉 찬 기간의 실험을 기록하는 다섯 단계

1. 원무팀장이 실험 기간의 주별 빈 예약 칸 수를 세고, 예약 희망 연락과 대기로 돌린 연락을 접수 기록에 따로 표시합니다.
2. 광고 담당 실장이 실험 설계서의 결과 지표를 예약 수에서 예약 희망 연락으로 옮기고, 옮긴 까닭을 한 줄로 씁니다.
3. 광고 담당 실장이 광고안별로 예약 희망 연락을 셈하고, 대기로 돌린 연락의 비율을 함께 냅니다.
4. 원장이 예약 희망 연락으로 판정한 결과를 받고, 결론을 꽉 찬 기간의 결론으로 한정해 실험 기록에 남깁니다.
5. 광고 담당 실장이 빈 칸이 다시 생기는 기간에 같은 광고안을 다시 견줄지 원장과 정합니다.

첫째 단계에서 예약 희망 연락을 따로 표시하는 것은, 접수 기록에 예약을 잡은 연락만 남기는 병원이 있기 때문입니다. 빈 칸이 없어 잡지 못한 연락이 기록에서 사라지면, 광고가 데려온 사람의 수가 기록에 남지 않습니다. 실험 기간만이라도 잡지 못한 연락을 한 줄씩 남깁니다.

넷째 단계에서 결론을 한정하는 것은, 꽉 찬 기간에 광고를 누른 사람과 빈 칸이 넉넉한 기간의 사람이 같지 않을 수 있기 때문입니다. 성수기에는 급한 사람이 많고 비수기에는 알아보는 사람이 많다면, 한 기간에 나은 광고안이 다른 기간에도 낫다는 근거가 없습니다.

둘째 단계에서 결과 지표를 옮긴 까닭을 설계서에 남기는 것은, 실험이 끝난 뒤 누군가 예약 수로 다시 판정하려 할 때를 대비하기 위해서입니다. 설계서에 옮긴 날과 까닭이 있으면, 예약 수로 낸 다른 결론이 나와도 어느 쪽이 설계에 맞는 판정인지 가릴 수 있습니다.

꽉 찬 기간 실험의 결론이 닿는 세 범위

세 범위 표의 둘째 줄은 예약 수로는 가릴 수 없는 결론입니다. 빈 칸이 모자라 예약 수가 막혀 있었으므로, 예약을 늘린 쪽이 어느 광고안인지는 이 기간의 숫자에 드러나지 않습니다.

셋째 줄은 다음 실험의 물음이 됩니다. 꽉 찬 기간에 앞선 광고안을 빈 칸이 넉넉한 기간에 한 번 더 견주면, 두 기간의 결론을 함께 놓고 광고안을 정할 수 있습니다. 광고로 온 연락을 병원 전체 성과와 함께 어떻게 읽을지는 병원 광고 성과 분석에서 이어서 읽을 수 있습니다.

예약 수로 판정한 실험과 예약 희망 연락으로 판정한 실험

같은 꽉 찬 기간의 실험을 예약 수로 판정할 때와 예약 희망 연락으로 판정할 때를 네 물음으로 견주면, 어느 쪽이 실험의 뜻을 지키는지가 드러납니다.

첫째 물음은 광고안의 차이가 드러나는지입니다. 예약 수로 판정하면 빈 칸이 찬 뒤로는 두 광고안의 예약이 함께 멈춰 차이가 사라집니다. 예약 희망 연락으로 판정하면 빈 칸과 관계없이 광고가 데려온 사람의 수가 남아 차이가 드러납니다.

둘째 물음은 기록하는 수고입니다. 예약 수는 예약표에서 바로 셀 수 있지만, 예약 희망 연락은 잡지 못한 연락까지 접수에서 따로 남겨야 합니다. 셋째 물음은 결론의 쓸모입니다. 예약 수로 낸 결론은 두 광고안이 같았다는 틀린 결론이 될 수 있고, 예약 희망 연락으로 낸 결론은 꽉 찬 기간에 한정되지만 맞는 결론입니다.

넷째 물음은 원장이 읽기 쉬운지입니다. 예약 수는 원장에게 익숙한 숫자이지만 이 기간에는 광고를 말해 주지 않고, 예약 희망 연락은 낯설지만 광고가 한 일을 말해 줍니다. 네 물음을 견주면, 수고가 조금 더 들더라도 꽉 찬 기간의 실험은 예약 희망 연락으로 판정하는 쪽이 실험을 한 뜻을 지킵니다.

두 판정을 모두 함께 내는 것도 방법입니다. 예약 수로 낸 판정과 예약 희망 연락으로 낸 판정이 같다면 막힘이 결과를 가리지 않았다는 뜻이고, 다르다면 막힘이 결과를 가렸다는 뜻입니다. 두 판정이 다를 때는 예약 희망 연락의 판정을 따르고, 두 판정이 다르게 나왔다는 사실도 실험 기록에 남깁니다.

원장에게 두 숫자를 함께 보고하는 방식

원장 보고에는 예약 수를 빼지 않고 함께 싣되, 판정은 예약 희망 연락으로 했다는 것을 맨 위에 밝힙니다. 예약 수 옆에는 그 주의 빈 예약 칸 수를 함께 붙여, 예약 수가 왜 늘지 않았는지 한눈에 알 수 있게 합니다.

대기로 돌린 연락이 많았던 주는 광고비가 예약으로 이어지지 못한 주이기도 합니다. 이 숫자는 실험의 판정과 따로, 꽉 찬 기간에 광고를 얼마나 줄일지 정할 때 원장이 쓰는 재료가 됩니다. 광고 밖 채널의 성과도 같은 막힘을 겪으므로, 그 성과를 어떻게 읽는지는 GEO마케팅 성과에서 따로 다룹니다.

재는 방법을 달리하는 경우