Brand lift study 설계 — 광고가 인지·호감도를 끌어올렸나

브랜드 광고는 ROAS로 잡히지 않고 인지·호감도·구매의향으로만 측정됩니다. 노출 그룹과 비노출 그룹을 비교하는 brand lift study의 설계, 표본 계산, 실무 함정을 마케터 시선에서 정리.

"이 브랜드 캠페인 효과 있었어?"라는 질문은 ROAS로 답하기 어렵습니다. 브랜드 광고의 진짜 결과는 며칠 또는 몇 주 뒤에 인지·호감도·구매의향으로 나타나기 때문입니다. brand lift study는 그 변화를 노출 그룹과 비노출 그룹의 설문 응답 차이로 측정합니다. Meta·Google·YouTube가 자체 도구로 제공하지만, 설계 한 줄을 잘못 잡으면 결과 해석이 통째로 깨집니다.

마케터가 이 글을 읽어야 하는 이유: 브랜드 캠페인 예산 의사결정에서 "효과 있었다 vs 없었다"의 답을 데이터로 정리하지 않으면, 다음 분기 브랜드 예산이 늘 위협받습니다. brand lift study가 그 답을 정직하게 만드는 표준 도구이고, 마케터가 직접 점검할 5가지 디자인 결정이 있습니다. 그 결정 한 줄이 결과의 신뢰도 절반을 만듭니다.

ROAS가 못 잡는 자리를 잡는 표준 — 노출과 비노출의 설문 응답 차이가 곧 brand lift.

1. Brand lift의 한 줄 직관

광고에 노출된 사람들과 노출되지 않은 사람들이 같은 설문에 어떻게 답하는가의 차이.

같은 사용자 풀에서 무작위로 두 그룹 추출 → 한 그룹은 광고 노출, 다른 그룹은 비노출(holdout) → 며칠 뒤 두 그룹 모두에게 같은 설문 → 응답 차이가 brand lift.

전형적 4개 KPI 문항:

KPI	질문
인지 (Awareness)	"다음 브랜드 중 들어본 적 있는 것은?"
회상 (Ad recall)	"최근 1주일 안에 X 브랜드 광고를 본 적 있나요?"
호감도 (Favorability)	"X 브랜드에 대한 호감도는?"
구매의향 (Purchase intent)	"다음 구매 시 X 브랜드를 고려하시겠습니까?"

노출 그룹 응답률이 비노출 그룹보다 +5%p 높다면, 그 5%p가 brand lift. 이게 광고 노출이 일으킨 인과 효과의 추정치입니다.

이 글의 전제

독자가 브랜드 캠페인을 운영해본 적 있고 ROAS·인지도 같은 단어를 일상으로 쓴다고 가정합니다. A/B 테스트의 무작위 배정 직관도 받아들인다고 가정합니다.

2. ROAS가 못 잡는 자리

브랜드 캠페인의 결과는 ROAS 보고서에서 거의 안 잡힙니다. 이유는 세 가지.

2-1. 시간 격차

브랜드 광고를 본 사용자가 며칠~몇 주 뒤에 검색·구매로 이어지는데, 그 사이에 다른 채널·이벤트가 끼어듭니다. 마지막 클릭 어트리뷰션에서는 검색 광고에 100% 공이 가고 브랜드 광고는 0.

2-2. 측정 한도

ROAS는 클릭과 직접 전환만 잡습니다. 인지도·호감도 변화는 ROAS에 안 들어옵니다. 측정 도구의 한계.

2-3. 자가 선택 편향

관심 있는 사람이 광고를 더 보고 더 구매합니다. 광고가 일으킨 효과가 아니라 원래 관심 있던 사람의 행동.

이 세 가지를 동시에 해결하는 설계가 brand lift study의 무작위 배정 + holdout. 인과 효과 추정의 표준 구조입니다.

3. 무작위 배정과 holdout

brand lift의 핵심은 무작위 배정입니다. 같은 사용자 풀에서 광고 노출 자격을 무작위로 결정. 노출 그룹과 holdout 그룹이 통계적으로 동일한 분포를 갖도록.

Meta·Google·YouTube의 brand lift 도구는 광고 자격을 가진 사용자 중 일정 비율(보통 10-20%)을 holdout으로 떼어두고, 그 그룹에는 광고를 노출하지 않습니다. 캠페인 종료 후 양 그룹에 같은 설문이 노출됩니다.

항목	노출 그룹 (Exposed)	Holdout
배정	무작위 80-90%	무작위 10-20%
광고 노출	가능	차단
설문 노출	캠페인 후	캠페인 후
응답 비교	brand lift 측정	기준선

이 구조 안에서만 "광고가 일으킨 효과"가 정직하게 추정됩니다. holdout 없이 노출 그룹의 사전·사후만 비교하는 건 자연 변화·계절성을 잡지 못해 결과가 부풀려집니다.

holdout 비율의 트레이드오프

holdout 10%면 그 사용자에 광고비가 안 쓰여 효율이 좋고, 검출력은 약합니다. 20%면 검출력은 좋지만 그만큼 광고 노출 기회가 줄어 캠페인 도달이 줄어듭니다. 작은 캠페인은 20%, 대형 캠페인은 10%가 일반적.

4. 표본 크기 — 검출 가능 lift는 얼마?

brand lift는 표본이 충분해야 검출 가능합니다. 작은 캠페인에서는 lift가 있어도 검출 못 함.

표준 lift 검출 표본 크기 공식 (이항 비율 차이):

$$n\approx \frac{(z_{\alpha }+z_{\beta }{)}^2\cdot 2\bar{p}(1-\bar{p})}{{\delta }^2}$$

$\bar{p}$는 평균 응답률, $\delta$는 검출하고 싶은 lift, $z_{\alpha }=1.96$, $z_{\beta }=0.84$ (검출력 80%, 양측 5%).

예시: 인지 baseline 30%, 5%p lift 검출 (검출력 80%, 양측 5%).

• $\bar{p}=0.325$, $\delta =0.05$
• $n\approx \frac{(1.96+0.84{)}^2\cdot 2\cdot 0.325\cdot 0.675}{0.05^2}\approx 1376$

각 그룹 1376명, 총 약 2750명 응답 필요. 응답률 5% 가정 시 노출 약 5만 명, holdout 1.4만 명 = 캠페인 노출 6.4만 명+.

baseline	검출 lift	그룹당 표본
30%	5%p	약 1300
30%	3%p	약 3700
30%	1%p	약 33,000
50%	5%p	약 1500

작은 lift를 검출하려면 표본이 폭증합니다. 1%p lift를 잡으려면 그룹당 3.3만 명.

5. 코드 한 묶음 — lift 검출 표본 계산

이게 글에 박는 유일한 코드입니다.