top of page

랜딩페이지 A/B 테스트, 신청 많은 쪽이 이긴 걸까요? 상담실이 보는 실수 7가지

10월 29일
6분 분량

목차


랜딩페이지 A/B 테스트 결과가 나오면 상담실에도 공유가 와요. 'B안 신청이 더 많으니 이번 달부터 B안으로 갑니다.' 그런데 상담실 기준으로 다시 보면 결론이 뒤집힐 수 있어요. 이 글은 상담실장 입장에서 랜딩 테스트에서 자주 놓치는 실수 7가지와 고치는 방법을 정리했어요.


상담실장이 먼저 드리는 요약

  • 랜딩 테스트의 승자는 신청 수가 아니라 승인 상담 수나 승인단가로 정해요.

  • 기간·표본·판정 기준은 시작 전에 정하고, 트래픽 쏠림과 상담실 선입견을 막아야 해요.

  • 테스트안 문구도 의료광고 기준을 먼저 통과해야 결과를 쓸 수 있어요.


1. 신청 수로 승자를 정하면 상담실이 그 비용을 떠안습니다

랜딩 테스트의 승자는 신청 수가 아니라 승인된 상담 수로 정해야 해요. 신청 문턱을 낮춘 안은 신청이 늘어도 연결과 승인이 함께 늘지 않을 수 있어요.


AMPM 인사이트 [1]도 클릭률, 폼 완성률, 이탈률 중 무엇을 볼지 먼저 하나로 정하라고 권했어요. 병원이라면 그 하나를 승인 상담 수나 승인단가로 두는 편이 안전해요.


지표

계산식

A안(가정)

B안(가정)

신청 전환율

신청 ÷ 방문

3.0%

4.2%

연결률

연결 ÷ 신청

70%

50%

승인률

승인 ÷ 신청

40%

27%

방문 1,000명당 승인

방문 × 신청 전환율 × 승인률

12건

약 11건


신청 전환율만 보면 B안이 이겨요. 하지만 같은 방문 수를 기준으로 승인 상담을 세면 A안이 조금 더 많아요. 표의 값은 계산 방법을 보여 주기 위한 가정이에요.


승인 판정이 늦게 끝나는 것도 계산에 넣으세요

상담실 판정은 신청 당일에 끝나지 않아요. 부재중 재통화, 예약 확인, 내원 여부까지 보면 며칠이 걸리기도 해요. 그래서 테스트 종료일과 판정 마감일을 따로 정해야 해요.


예를 들어 테스트를 14일 돌렸다면, 마지막 날 들어온 신청까지 판정이 끝나는 날을 결과 발표일로 잡으세요. 판정이 덜 끝난 상태에서 결과를 내면 늦게 들어온 신청이 많은 안이 불리해져요.


팀퍼포먼스는 DB 단가보다 승인률, 승인단가, 상담 연결까지 이어지는 구조를 기준으로 랜딩 테스트 결과를 봐요.


2. 하루 이틀 만에 결론을 내리면 요일 효과를 승자로 착각해요

AMPM 인사이트 [1]는 1~2일 만에 판단하면 시간대, 요일, 기기에 따른 변동을 놓친다며 최소 7~14일 이상 유지하라고 권했어요.


병원 상담 문의도 요일과 진료 시간에 따라 달라질 수 있어요. 휴진 다음 날이나 연휴 직전처럼 특정한 날이 한쪽 안에만 몰리면 결과가 기울어요.


같은 요일이 최소 두 번 들어가도록 기간을 잡으세요. 시작일도 유입이 평소와 비슷한 날로 고르는 편이 좋아요.


상담실 쪽 변수도 함께 적어 두세요. 상담 인력이 한 명 빠진 날, 전화가 몰린 날, 이벤트 안내 문자를 보낸 날은 연결률이 평소와 달라져요. 이런 날이 한쪽 안에만 겹치면 랜딩 차이가 아니라 상담실 사정이 결과를 만든 셈이에요.


기간 중 기록할 항목

왜 필요한가

상담 인력 근무표

연결률 차이가 인력 때문인지 가르기 위해

휴진·단축 진료일

특정 요일 쏠림을 확인하기 위해

문자·알림톡 발송일

외부 자극으로 늘어난 문의를 빼기 위해

소재 교체일

랜딩 외 변경이 섞였는지 확인하기 위해


흰 책상 위 스마트폰, 랜딩페이지 A/B 테스트 모바일 화면

모바일 랜딩은 요일과 시간대에 따라 반응이 크게 달라질 수 있어요 · Photo: Unsplash


3. 결과를 매일 들여다보다 멈추면 우연을 승리로 기록합니다

중간 수치를 자주 보다가 '지금 이기고 있으니 끝내자'고 하는 것도 흔한 실수예요. Johari 외 연구진 [3]은 결과를 계속 지켜보며 표본 크기를 정하면 일반적인 p값과 신뢰구간을 믿을 수 없게 된다고 지적했어요.


해결책은 시작 전에 기간, 최소 표본, 판정 기준을 문서로 정해 두는 거예요. 중간 확인은 오류를 찾는 용도로만 쓰세요.


중간 확인에서 볼 것은 세 가지면 충분해요. 폼 제출이 양쪽 모두 정상 집계되는지, 안별 방문 비율이 계획대로인지, 상담실 시트에 안 구분 값이 빠짐없이 들어오는지예요. 이 세 가지가 맞으면 결과 수치는 마감일까지 덮어 두세요.


표본 기준이 없다면 AMPM 인사이트 [1]가 제시한 실험당 최소 1,000세션 이상을 출발점으로 삼을 수 있어요. 다만 병원은 승인 상담 수가 적기 때문에, 신청 기준보다 기간을 더 길게 잡아야 할 수 있어요.


4. 트래픽이 한쪽으로 쏠렸는데 그대로 비교하면 안 돼요

반반 나누기로 했는데 실제 방문 수가 크게 다르다면, 결과보다 분배부터 의심해야 해요. Microsoft Research 연구진의 정리 [4]는 이런 표본 비율 불일치(SRM)를 여러 데이터 품질 문제의 신호로 봐요.


같은 자료 [4]는 원인을 찾지 않고 넘어가면 나쁜 변경이 좋아 보이거나 좋은 변경이 나빠 보일 수 있다고 설명해요.


광고 매체에서 랜딩 URL만 따로 넣어 나누면, 매체 최적화가 한쪽 광고에 예산을 더 줄 수 있어요. 구글 광고 실험 도움말 [2]은 실험 기능이 예산을 대조군과 실험군에 고르게 나눈다고 안내해요.


같은 도움말 [2]은 쿠키 기준으로 나눌 때 잠재고객 목록에 최소 10,000명 이상의 사용자가 있어야 결과가 덜 흔들린다고 안내해요. AMPM 인사이트 [1]도 같은 타깃과 같은 소재에서 UTM으로 랜딩만 바꾸는 방법을 권했어요.


5. 상담실이 어느 안의 DB인지 알고 응대하면 판정이 기울어요

상담 연결과 승인은 결국 사람이 판정해요. 상담원이 'B안 DB는 질이 낮다'는 생각을 갖고 있으면 통화 순서나 재통화 횟수가 달라질 수 있어요.


상담실 화면에는 안 구분 값을 보이지 않게 넣고, 판정이 끝난 뒤에 붙여서 집계하세요. 판정 기준은 테스트 전에 정의서로 맞춰 두는 것이 좋아요.


실무에서는 이렇게 하면 돼요. 랜딩 폼에 숨김 필드로 안 구분 값을 넣고, DB 시트에는 그 열을 숨겨 둬요. 상담실은 평소처럼 연결·승인·무효만 기록하고, 판정 마감일에 담당자가 숨긴 열을 펼쳐 집계해요.


이 방식은 상담원을 의심해서가 아니에요. 사람은 결과를 알면 무의식적으로 기울기 때문에, 처음부터 모르게 하는 편이 상담실도 편해요.


승인과 무효를 어떻게 나눌지는 DB 승인률 계산법 글에서 자세히 다뤘어요.


6. 한 번에 여러 곳을 바꾸면 무엇이 효과였는지 알 수 없어요

헤드라인, 폼 문항, 버튼 위치를 한꺼번에 바꾸면 이긴 이유를 설명할 수 없어요. AMPM 인사이트 [1]는 처음 2~3회는 확연히 다른 버전으로 크게 비교하고, 그다음 세부 조정으로 넘어가라고 권했어요.


크게 비교하는 단계에서도 무엇을 바꿨는지는 반드시 남겨야 해요. 그래야 다음 테스트에서 어떤 요소를 쪼개 볼지 정할 수 있어요.


변경 기록표에 남길 항목

  • 테스트 이름과 가설 한 줄

  • 바꾼 요소(헤드라인·폼 문항·이미지·버튼)

  • 시작일, 종료일, 판정 지표

  • 상담실 판정 기준의 버전


나무 테이블 위 서류와 펜, 랜딩페이지 A/B 테스트 변경 기록

무엇을 바꿨는지 남겨야 다음 테스트를 설계할 수 있어요 · Photo: Unsplash


팀퍼포먼스는 AI 기반 운영 자동화와 리포트 자동화를 실무에 적용해, 테스트 기간 동안 안별 신청·연결·승인을 한 표로 모아 봐요.


7. 새 랜딩 문구의 의료광고 기준을 확인하지 않으면 테스트 자체가 위험해요

랜딩 테스트안도 광고와 이어진 의료광고 문구예요. B안 헤드라인이 더 자극적이라 이겼다면, 그 문구가 의료법 [5] 기준을 지키는지부터 확인해야 해요.


테스트안에 넣기 전에 걸러야 할 표현

  • '부작용 없는', '최고의 결과' 같은 단정 표현

  • 다른 병원과 비교해 우위를 주장하는 문구

  • 치료 경험담을 광고 문구처럼 쓰는 후기형 문장


신청이 늘어난 이유가 규정 위반 문구라면, 그 테스트 결과는 쓸 수 없는 결과예요. 테스트안을 만들 때부터 문구 검토를 일정에 넣으세요.


팀퍼포먼스는 의료광고 규정을 운영 단계에서 함께 점검하기 때문에, 테스트안 문구도 같은 기준으로 먼저 걸러요.


랜딩 테스트를 신청 수가 아니라 상담실 승인 기준으로 다시 보고 싶다면, 진료과·지역만 입력하고 맞춤 광고 플랜을 받아보세요.


8. 랜딩페이지 A/B 테스트는 상담실 판정까지 끝나야 결과가 나옵니다

정리하면 테스트의 끝은 신청 집계가 아니라 상담실 판정이에요. 다음 테스트부터는 아래 순서를 체크해 보세요.


  1. 판정 지표를 승인 상담 수나 승인단가 하나로 정해요.

  2. 같은 요일이 두 번 이상 들어가도록 기간을 잡아요.

  3. 최소 표본과 판정 기준을 시작 전에 문서로 남겨요.

  4. 안별 방문 비율이 계획과 맞는지 매일 확인해요.

  5. 상담실에는 안 구분을 숨기고, 판정 후에 붙여요.

  6. 바꾼 요소를 변경 기록표에 남겨요.

  7. 테스트안 문구는 의료광고 기준으로 먼저 걸러요.


랜딩페이지 A/B 테스트를 한 번 끝냈다면, 결과를 다음 테스트의 가설로 바로 옮기세요. 이긴 안을 새 기준안으로 두고, 이긴 이유로 추정되는 요소 하나만 바꿔 다시 비교하는 식이에요.


혼자 하기 어려운 부분은 매체, 랜딩, 상담 판정 데이터를 한 표로 잇는 일이에요. 이 연결이 없으면 테스트는 다시 신청 수 비교로 돌아가요.


랜딩 구조 자체를 먼저 점검하고 싶다면 병원 랜딩페이지 자가진단 체크리스트를 함께 보세요.


자주 묻는 질문 (FAQ)


Q. 랜딩 A/B 테스트는 최소 며칠 돌려야 하나요?

업계에서는 최소 7~14일을 권하는 경우가 많아요. 병원은 승인 상담 수가 적어서, 같은 요일이 두 번 이상 들어가도록 더 길게 잡는 편이 안전해요.


Q. 신청은 B안이 많은데 승인은 A안이 많으면 어떻게 하나요?

승인 상담 수나 승인단가를 기준으로 A안을 유지하는 것이 기본이에요. B안에서 신청을 늘린 요소만 따로 떼어 다음 테스트로 확인해 보세요.


Q. 상담실에 테스트 사실을 알려야 하나요?

테스트가 진행된다는 사실은 공유하되, 개별 DB가 어느 안에서 왔는지는 판정이 끝날 때까지 보이지 않게 하는 방식을 권해요.


참고 자료


같이 보면 좋은 실무 글


글 · 팀퍼포먼스 콘텐츠팀 LABIT

팀퍼포먼스는 병원·의료 분야 전문 퍼포먼스 마케팅 대행사입니다. 성형외과·피부과·치과·비뇨기과 등 진료과별 CPA·운영대행 실무를 바탕으로, 의료광고 규정을 지키면서 상담과 내원으로 이어지는 광고 구조를 설계합니다.



관련해서 더 알고싶으면 아래 링크를 눌러보세요. 😎

진료과·지역·월 예산만 알려주시면, 팀퍼포먼스가 랜딩·DB·상담을 잇는 운영 방식을 우리 병원 기준으로 제안해 드립니다.



 
 
bottom of page