A/B 테스트

A/B 테스트는 Yandex Mediation 단위의 한 부분(제어)에 현재 설정을 적용하고 다른 부분(테스트)에 대체 설정을 적용하는 실험입니다. 테스트 결과를 바탕으로 제어 및 테스트 설정이 얼마나 효과적인지 비교하고 모든 노출에 대해 현재 설정을 유지할지 아니면 새로운 설정을 적용할지 결정할 수 있습니다.

A/B 테스트 생성

A/B 테스트를 생성하려면:

1. 테스트를 실행할 단위의 설정을 엽니다.

2. Networks로 이동하여 Create A/B test를 클릭합니다. 테스트 설정이 열립니다.

3. A/B 테스트의 이름을 입력합니다.

4. 테스트 그룹의 크기를 선택합니다(10~50%). 테스트로 이동할 트래픽의 비율입니다.

5. 테스트 기간을 지정합니다. 권장 기간은 최소 7일입니다.

6. Yandex Mediation의 대체 설정을 구성합니다. 변경할 수 있는 항목:

   • 단위에서 광고 네트워크를 추가하거나 제거하여 광고 소스를 재정의합니다.
   • 다양한 광고 네트워크에 대한 eCPM 값을 실험하여 스마트 워터폴 순서를 변경합니다.

   Примечание

   하나의 테스트에 대해 하나의 설정을 변경하는 것을 권장합니다(예를 들어, 하나의 광고 네트워크를 추가하고 다른 설정은 변경하지 않음). 이렇게 하면 결과를 더 쉽게 분석할 수 있습니다.

7. Save를 클릭합니다.

테스트 중에는 단위 설정을 변경할 수 없습니다.

테스트 결과 분석

테스트 진행 상황을 확인하고 결과를 보려면 Ads in apps → A/B tests로 이동합니다. 테스트 이름 옆에 있는 을 클릭하세요. 두 부분으로 나누어진 데이터가 열립니다.

요약 테이블

테스트에 대한 일반적인 정보가 포함되어 있습니다.

• Profit: 테스트 노출에서의 보상과 제어 노출에서의 보상의 차이. 기본적으로 차이는 루블로 표시되지만, 통화를 미국 달러나 유로로 변경할 수 있습니다. 통화는 노출한 날의 러시아 연방 중앙은행의 환율로 변환됩니다.
• Impressions: 테스트 동안의 총 노출수. 노출이 많을수록 테스트 결과의 대표성이 높아집니다. 총 노출수가 10,000회 이상일 때 결과를 분석하는 것을 권장합니다.
• Days: 시작일부터 현재까지의 테스트 기간.
• Test group allocation: 테스트 이동하는 트래픽의 비율.

비교 테이블

테이블에는 제어 및 테스트 외에 그룹 내 광고 네트워크에 대한 개별 통계 지표가 포함됩니다.

• Impressions: 테스트하는 동안 그룹 또는 광고 네트워크의 노출수.
• eCPM: 그룹 또는 광고 네트워크의 1,000회 노출당 비용.
• Fill rate: 그룹 또는 광고 네트워크 내에서 요청수에 대해 제공된 광고 수의 비율(백분율).
• Show rate: 그룹 또는 광고 네트워크 내에서 제공된 광고 수에 대한 노출수의 비율(백분율).
• Revenue: 그룹 또는 광고 네트워크 노출에 대해 파트너에게 적립된 보상 금액. 요약 테이블의 수익과 동일한 통화로 테이블시됩니다.

결과에 따라 테스트를 완료합니다.

• 테스트가 더 많은 수익을 창출하면, 새로운 중재 설정을 단위의 모든 노출에 적용하는 것을 권장합니다.
• 테스트가 더 적은 수익을 창출하면, 단위의 모든 노출에 대해 원래의 중재 설정으로 돌아가는 것을 권장합니다.

테스트 상태

진행 중인 테스트는 Active 상태입니다.

테스트 기간이 종료되었지만 결과에 따라 결정이 내려지지 않은 경우, 테스트 상태는 Expired로 변경됩니다.

완료된 테스트는 Stopped 상태입니다.

지원 문의