브랜드 광고효과에만 사용할 수 있는 광고효과의 확실성은 광고효과 실적의 신뢰성을 파악하는 데 중요한 측정항목으로, 측정된 광고효과가 우연이 아닌 캠페인에 의해 나타났을 가능성을 뜻합니다.
이 페이지의 내용
작동 원리
1 - p값으로 계산되는 광고효과의 확실성은 광고효과 실적의 '통계적 유의성' 또는 '신뢰도'라고 부르기도 합니다. p값은 광고가 실제로 효과가 없었을 경우의 광고효과 실적을 나타냅니다. 확실성이 높으면, 즉 p값이 낮으면 광고효과가 우연히 나타났을 가능성이 낮다는 의미입니다. 다시 말해 광고효과가 광고 때문에 나타났다는 강력한 표시입니다.
브랜드 광고효과의 확실성 수준 이해하기
Google에서는 가장 높은 확실성(90%)으로 광고효과를 감지하기 위해 충분한 응답을 수집하려고 하지만, 확실성이 낮아도 광고 결정을 내리는 데 도움이 될 수 있습니다. Google Ads 계정에서는 일정 수준의 측정 확실성이 보장되는 모든 조사에서 광고효과 실적 및 관련 확실성이 70%를 초과하는 것을 확인할 수 있습니다. 70% 미만의 결과는 통계적으로 유의하지 않아 유용성과 신뢰성을 확신할 수 없으므로 보고되지 않습니다.
참고: 일부 계정에서는 광고효과의 확실성을 확인할 수 없습니다. 계정에 이 항목이 없으면 확실성 90%를 초과하는 결과만 확인할 수 있습니다. 광고효과의 확실성은 브랜드 광고효과에만 사용할 수 있습니다. 검색 및 전환 상승도 결과는 광고효과의 확실성이 가장 높은 경우(90% 초과)에만 공유됩니다.
광고효과의 확실성을 토대로 결과를 해석하고 활용하는 방법
다음 표에는 다양한 광고효과 확실성을 기준으로 광고효과 실적을 해석하는 방법에 관한 일반 지침이 나와 있습니다. 광고효과의 확실성은 편의상 5% 단위로 반내림합니다. 아래 표를 지침으로 사용하되, 결과를 해석할 때는 비즈니스 요구사항과 위험 허용 범위를 고려하는 것이 좋습니다.
| 광고효과의 확실성 | 해석 |
|---|---|
| 90% 이상 | 신뢰도 높음 - 광고효과가 우연히 나타났을 가능성이 낮으므로 가장 신뢰할 수 있는 결과입니다. 광고로 인해 광고효과가 발생했다는 강력한 증거가 있으므로 신뢰도 높은 결과를 토대로 광고와 관련된 결정을 내릴 수 있습니다. |
| 85% | 신뢰도 중간 - 측정 결과가 노이즈의 영향을 받았을 가능성이 약간 있습니다. 방향성을 파악하거나 위험도가 낮은 의사 결정을 내릴 때 참고하는 것이 좋습니다. |
| 80% | |
| 75% | 신뢰도 낮음 - 측정 결과가 우연히 발생한 것으로, 광고 실적이 정확하게 반영되지 않았을 수 있습니다. 신뢰도가 낮은 결과는 방향성을 파악하거나 위험도가 낮은 의사 결정을 내릴 때 참고하는 것이 좋습니다. 중요한 결정을 내려야 하는 경우 먼저 재측정을 통해 더 많은 설문조사 응답을 수집하여 확실성을 높이세요. |
| 70% | |
| '광고효과 없음' | 신뢰할 수 없는 결과 - 확실성이 70% 미만인 결과는 광고효과가 있었다는 충분한 증거가 되지 않으므로 Google Ads에 '광고효과 없음'으로 보고됩니다. |
브랜드 광고효과의 목표는 확실성이 가장 높은 수준인 90%를 나타내는 광고효과를 파악하는 것입니다. 확실성이 낮은 결과가 나타났다고 해서 결과의 품질이 떨어지는 것은 아닙니다. 오히려 다른 방법으로는 얻지 못할 데이터 포인트를 얻을 수 있습니다.
확실성이 낮은 결과 이해하기
결과의 확실성이 낮다고 해서 항상 광고효과가 없는 것은 아닙니다. 이러한 결과는 추가 확인이 필요한 통계를 얻는 데 도움이 될 수 있습니다. 광고효과의 확실성이 낮다는 것은 측정 결과 파악된 광고효과의 신뢰도가 높지 않다는 것을 의미합니다. 이는 설문조사 응답이 충분히 수집되지 않았기 때문일 수도 있고 광고효과가 낮기 때문일 수도 있습니다.
- 설문조사 수가 적음: 설문조사 수가 적으면(응답 4,100개 미만) 측정 능력이 낮아지므로 광고효과의 확실성이 낮아질 가능성이 큽니다. 특히 결과를 연령, 성별, 캠페인 등을 기준으로 분류할 때 세그먼트당 설문조사 수가 더 적습니다. 이 경우 재측정을 통해 설문조사 응답을 늘릴 수 있습니다.
- 절대적 광고효과가 낮음: 광고효과가 2% 미만이면 높은 확실성으로 감지하기가 어렵습니다. 하지만 절대적 광고효과가 낮다고 해서 반드시 실적이 저조한 것은 아닙니다. 절대적 광고효과가 낮은 캠페인도 전환 고려 사용자당 비용(CPLU)은 더 효과적일 수 있습니다.
광고효과의 확실성이 다를 때 세그먼트 수준에서 광고효과 비교하기
연령대와 같은 세그먼트에 따라 광고효과의 확실성이 달라질 수 있습니다. 위에서 설명한 것처럼 광고효과의 확실성이 가장 높은 세그먼트가 가장 실적이 우수한 세그먼트라고 판단해서는 안 됩니다.
첫째, 절대적 광고효과 또는 CPLU를 사용하여 세그먼트를 비교하는 것이 좋습니다(전환을 고려하는 사용자는 사용하지 마세요). 둘째, 여러 세그먼트 간의 광고효과가 유사한 경우(신뢰 구간 중복이 많은 경우)가 자주 있기 때문에 최적의 세그먼트를 명확하게 파악하기 어렵습니다. 하지만 실적이 가장 우수한 세그먼트를 기준으로 캠페인을 최적화하려면 절대적 광고효과가 가장 높은 세그먼트(또는 CPLU가 가장 낮은 세그먼트)를 선택하는 것이 평균적으로 최적의 결정을 내릴 수 있습니다. 다만 광고효과의 확실성이 낮을수록 측정된 실적이 노이즈로 인해 발생했을 가능성이 크다는 점은 유의하세요. 실적이 유사한 세그먼트가 여러 개 있는 경우 확실성이 가장 높은 세그먼트를 선택하여 위험을 최소화하는 것이 좋습니다. 실적이 가장 우수한 세그먼트를 파악하는 방법을 잘 모르겠다면 계정 담당자에게 문의하세요.
신뢰 구간 및 신뢰 수준 이해하기
일반적으로 광고효과를 언급할 때 이는 광고로 인해 나타났을 가능성이 가장 높은 '특정 지점의 추정치'를 가리킵니다. 하지만 Google Ads에서는 측정 결과가 해당될 것으로 추정되는 범위인, 모든 브랜드 광고효과 측정항목의 신뢰 구간도 확인할 수 있습니다. 이 범위는 광고효과가 실제로 발생할 가능성이 있는 최곳값과 최젓값인 상한과 하한으로 정의됩니다. 광고효과 실적에는 80%의 양측 신뢰 구간이 사용됩니다. 즉, 실제 광고효과가 하한과 상한 사이에 있을 확률이 80%입니다. 이는 광고효과가 하한보다 높을 확률이 90%라는 뜻이기도 합니다.
광고효과의 확실성이 90%보다 작으면 광고효과가 양수임을 90% 이상의 확실성으로 보장할 수 없으므로 신뢰 구간의 하한이 0보다 작아집니다.
자주 묻는 질문(FAQ)
광고효과의 최소 확실성을 직접 선택할 수 있나요?
광고효과의 확실성을 높이려면 어떻게 해야 하나요?
- 재측정을 통해 설문조사 수집을 늘립니다.
- 광고 회상도 또는 인지도를 측정하여 확실성이 높은 광고효과를 얻을 가능성을 확인합니다.
- 계정 관리자에게 문의하여 광고효과가 높은 광고 캠페인을 선택합니다.
광고효과의 확실성이 계산되는 방식을 자세히 알아보려면 어떻게 해야 하나요?
