인사이트

증분 테스트가 마케팅 캠페인에 중요한 이유

2024년 10월 15일

Why Incrementality Testing Is Crucial for Marketing Campaigns

경쟁이 치열한 모바일 앱 시장에서 꾸준한 성장을 이루는 것은 결코 쉬운 일이 아니며, 특히 마케팅 캠페인의 실제 효과를 정확하게 측정하는 것은 더욱 어렵습니다. 마케터들은 종종 신규 고객 확보와 리타겟팅에 막대한 자원을 투자하지만, 결국 다음과 같은 의문만 남게 됩니다. 이 캠페인이 실제로 효과를 냈을까요, 아니면 이 사용자들은 어차피 전환했을까요?

바로 이 지점에서 점진적 테스트가 필수적이 됩니다. 점진적 테스트는 노력으로 실제로 발생하는 효과 증대를 분리해냄으로써 무엇이 효과가 있고 무엇이 효과가 없는지 명확하게 보여주어 지출을 최적화하고 수익을 극대화하는 데 도움을 줍니다.

캠페인을 효율적으로 확장하려면 증분 테스트를 이해하고 실행하는 것이 중요합니다.

점진적 발전이란 무엇을 의미하나요?

증분성 테스트는 성장 마케터들이 사용하는 강력한 측정 방법론입니다. 에게 마케팅 캠페인의 실제 효과를 판단합니다. 마케터는 사용자들을 테스트 그룹과 대조 그룹으로 세심하게 구분함으로써 앱 설치 증가, 사용자 참여도 향상, 매출 증대 등 마케팅 활동으로 창출되는 추가적인 가치를 분석할 수 있습니다.

이러한 접근 방식을 통해 마케터는 캠페인의 구체적인 영향을 분리하여 진정한 성장을 이끄는 요인과 단순히 자연적 추세에 기인한 요인을 구분할 수 있습니다.

점진적 테스트를 통해 데이터 기반 의사결정을 내리고 마케팅 전략을 개선하여 궁극적으로 자원 배분을 더욱 효율적으로 하고 투자 수익률(ROI)을 향상시킬 수 있습니다. 이 개념을 이해하는 것은 A/B 테스트와 같은 다른 테스트 방법과의 차이점을 살펴보는 데 필수적입니다.

점진적 평가 실험은 A/B 실험과 어떻게 다른가요?

증분 효과 실험과 A/B 실험은 모두 성장 마케터의 필수 방법론이지만, 목적이 다르고 캠페인 성과에 대한 통찰력도 다릅니다.

주요 초점 증분성 실험 마케팅 활동의 진정한 인과적 영향을 파악하는 것이 목적입니다. 이러한 실험은 마케팅 활동에 노출된 실험군과 노출되지 않은 대조군의 행동을 비교하여 특정 캠페인이나 개입의 효과를 분리해내는 것을 목표로 합니다. 

목표는 캠페인을 통해 발생한 추가적인 성과 향상을 파악하는 것, 즉 본질적으로 다음 질문에 답하는 것입니다. 이 마케팅 활동으로 인해 추가적으로 발생한 전환율이나 매출은 어느 정도입니까?

이와 대조적으로 A/B 실험(또는 분할 테스트)은 광고 소재, 랜딩 페이지, 이메일 제목 등 캠페인 내 단일 요소의 두 가지 이상의 변형을 비교하여 어떤 변형이 더 나은 성과를 내는지 확인하기 위해 설계되었습니다. A/B 테스트는 전체 캠페인의 전반적인 영향을 분리해서 분석하는 것보다는 개별 구성 요소를 최적화하는 데 중점을 둡니다.

How are incrementality experiments different from A/B experiments?

리타겟팅 캠페인에서 증분 테스트의 필요성

점진적 테스트 ~에 리타겟팅 이는 리타겟팅 캠페인이 전환이나 매출과 같은 추가적인 결과를 실제로 창출하는지 여부를 판단하는 데 매우 중요한 방법입니다. 캠페인이 없었을 때 자연스럽게 발생했을 결과보다 더 나은 결과를 가져오는지 확인하는 데 필수적입니다.

리타겟팅 캠페인은 까다로울 수 있습니다. 리타겟팅 광고는 이미 앱에 익숙한 사용자를 대상으로 하기 때문입니다. 이러한 사용자 중 일부는 리타겟팅 광고를 보지 않고도 앱을 다시 방문하거나 직접 전환할 수 있습니다. 증분 효과 테스트를 하지 않으면 캠페인의 영향을 잘못 해석하여 부정확한 기여도 분석으로 이어질 수 있습니다.

예를 들어, 이전에 앱을 설치한 사용자는 리타겟팅 광고를 보았는지 여부와 관계없이 며칠 내에 앱 내 구매를 할 의향이 있었을 수 있습니다. 증분 효과 테스트는 마케터가 리타겟팅 광고가 구매를 유도하는 데 결정적인 요인이었는지, 아니면 사용자가 광고가 없었더라도 구매를 했을 것인지를 측정하는 데 도움이 됩니다.

점진적 테스트를 수행하기 위한 방법론

증분 효과 테스트를 위해 마케터는 다음 방법론을 활용하여 광고에 노출된 테스트 그룹과 광고를 전혀 받지 않거나 대체 콘텐츠를 제공받는 대조 그룹을 비교할 수 있습니다. 다음은 세 가지 일반적인 접근 방식입니다.

치료의사분석(ITT)

이 방법에서는 사용자를 재참여 광고를 볼 수 있는 테스트 그룹과 광고를 보지 않는 대조 그룹으로 나눕니다. 두 그룹의 결과를 추적함으로써 캠페인의 전반적인 효과를 평가하는 데 도움이 됩니다.

공익광고(PSA)

실험군은 해당 브랜드의 광고를 시청하고, 대조군은 공익 광고를 시청합니다. 이 방법은 두 그룹 모두 광고에 노출되므로 외부 잡음을 줄여 보다 "현실적인" 비교를 가능하게 합니다.

고스트 광고

이 방법에서는 테스트 그룹에는 브랜드 광고를 보여주고, 대조 그룹에는 다른 광고주의 광고를 보여줍니다. 대조 그룹에서 어떤 사용자가 광고를 보았을지 추적함으로써, 이 접근 방식은 광고 노출 사용자와 비노출 사용자를 진정으로 동일한 조건에서 비교할 수 있도록 합니다.

Methodologies to conduct incrementality testing: intent to treat (ITT), public service announcements (PSA), ghost ads

점진적 테스트를 위한 모범 사례 및 일반적인 함정

점진적 테스트를 최대한 활용하고 흔히 발생하는 문제점을 피하려면 모바일 앱 마케터는 다음과 같은 모범 사례를 따라야 합니다.

1. 명확하고 구체적인 목표를 설정하세요

증분성 테스트를 수행하기 전에 정의하십시오. 당신이 측정하는 것. 앱 설치 수를 늘리거나, 인앱 구매를 촉진하거나, 이탈률을 줄이고 싶으신가요? 측정 가능한 목표를 설정하면 테스트를 설계하고 추적할 적절한 KPI를 식별하는 데 도움이 됩니다.

명확한 목표 없이 점진적 개선 테스트를 실행하면 결과가 불분명해지고 자원이 낭비될 수 있습니다. 결국 실행에 옮길 수 없는 데이터만 수집하게 되어 테스트 결과를 바탕으로 어떤 결정을 내려야 할지 막막해질 수 있습니다.

2. 대조군을 신중하게 선택하십시오.

점진적 테스트의 가장 중요한 측면 중 하나는 다음과 같습니다. 대조군—광고나 마케팅 캠페인을 보지 않는 사용자 그룹입니다. 핵심은 대조군이 목표 고객층을 대표하고, 완전히 노출되지 않음 테스트 중인 마케팅 활동에 대해.

대조군이 제대로 선정되지 않았거나 마케팅 캠페인의 일부 내용에 노출될 경우(의도치 않더라도), 결과가 부정확해질 수 있습니다. 이는 캠페인의 효과에 대한 잘못된 결론으로 이어져, 추가적인 영향력을 과대평가하거나 과소평가하게 될 수 있습니다.

3. 충분히 큰 표본 크기를 확보하십시오.

정확하고 통계적으로 유의미한 결과를 얻으려면 다음이 필요합니다. 충분히 큰 표본 크기. 증분 테스트는 A/B 테스트와 달리 장기적인 효과를 측정하고 더 복잡한 분석을 포함하므로 테스트 그룹과 대조 그룹의 규모가 클수록 좋습니다.

표본 크기가 작으면 무작위 잡음이 결과에 영향을 미쳐 잘못된 결론을 도출할 위험이 커집니다. 예산 제약이나 시간 제약이 표본 크기를 작게 만드는 이유가 될 수 있습니다. 그러나 이는 다음과 같은 결과를 초래할 수 있습니다. 결론이 나지 않거나 왜곡된 결과.

4. 외부 요인을 고려하십시오

계절성, 프로모션, 앱 스토어 순위, 심지어 경쟁사 활동과 같은 외부 요인은 앱 성능에 상당한 영향을 미칠 수 있습니다. 휴가철이나 블랙프라이데이와 같은 할인 행사 기간, 또는 앱 스토어 프로모션을 진행하는 등 트래픽이 많은 시기에 테스트를 실행하면 마케팅 캠페인 자체 외의 요인으로 인해 결과가 왜곡될 수 있습니다.

외부 요인을 무시하면 다음과 같은 결과가 초래될 수 있습니다. 지나치게 낙관적이거나 부정확한 결론 캠페인의 효과에 대해 이야기할 때는 항상 테스트 기간 동안 사용자 행동에 영향을 미쳤을 수 있는 외부 트렌드와 결과를 비교해야 합니다.

5. 장기적인 영향을 측정하십시오

증분 테스트에는 종종 다음이 필요합니다. 더 긴 시간 범위 기존 A/B 테스트보다 효과적인 이유는 시간 경과에 따른 실제 캠페인 효과를 측정할 수 있기 때문입니다. 특히 모바일 앱의 경우 사용자 행동이 며칠 또는 몇 주에 걸쳐 크게 달라질 수 있으므로, 너무 빠른 테스트는 잘못된 결과를 초래할 수 있습니다.

테스트 실행 짧은 시간 캠페인의 추가적인 가치를 완전히 포착하지 못할 수도 있으며, 특히 사용자 참여나 수익이 시간이 지남에 따라 누적되는 경우에는 더욱 그렇습니다.

6. 캠페인을 정기적으로 검증하고 재평가하십시오.

점진적 테스트는 일회성 활동이 아닙니다. 사용자 행동과 시장 상황이 변화함에 따라 캠페인의 효과도 달라집니다. 따라서 점진적 테스트의 중요성을 인식하는 것이 중요합니다. 정기적으로 검증하고 재평가하십시오. 마케팅 활동의 점진적인 효과를 분석하여 지속적인 최적화를 보장합니다.

마케터들은 테스트가 완료되면 얻은 인사이트가 무기한 유효하다고 생각하는 경우가 많습니다. 하지만 모바일 앱 시장은 매우 역동적이며, 오늘 효과적인 방법이 내일은 효과적이지 않을 수 있습니다.

사례 연구: 소셜 카지노 게임 앱, 고스트 광고 테스트 도입

한 소셜 카지노 게임 클라이언트가 안드로이드 플랫폼에서 리타겟팅 캠페인을 시험해 보고 싶어 했습니다. 이를 위해 평생 구매액이 $20~$80 사이인 새로운 사용자층을 대상으로 관련성 높은 동영상 광고를 제공하고자 했습니다. 

실험군은 해당 카테고리 사용자 중 동영상 광고를 본 그룹으로 구성되었고, 대조군은 해당 카테고리 사용자 중 디스플레이 및 배너 광고를 본 그룹으로 구성되었습니다.

Aarki 노출은 설치율, 구매율 및 ARPU를 높이는 데 기여했습니다.

점진적 테스트를 통해 진정한 캠페인 성과를 확인하세요.

어떤 캠페인이 진정한 성장을 이끌어내는지 이해하는 것은 더 이상 선택이 아니라 필수입니다. 증분 테스트는 마케터가 자연적 전환과 마케팅 활동의 직접적인 영향을 받은 전환을 구분하는 데 필요한 명확성을 제공합니다. 캠페인의 실제 효과를 파악하고 데이터 기반 의사 결정을 통해 광고비를 최적화하고 ROI를 극대화할 수 있습니다.

증분 테스트에 대해 아는 것만으로는 충분하지 않습니다. 효과적인 실행이 매우 중요합니다. 적절한 방법을 선택하는 것부터 흔히 발생하는 함정을 피하는 것까지, 증분 테스트는 복잡할 수 있지만 모바일 앱의 지속 가능한 성장을 이끌어내는 데 있어 획기적인 변화를 가져올 수 있습니다. 증분 테스트가 마케팅 성과를 어떻게 향상시킬 수 있는지 알아보시겠습니까? 지금 바로 Aarki에 연락하세요 더욱 스마트하고 효과적인 캠페인을 시작하여 실질적인 결과를 얻으세요.

ko_KRKO