제품 페이지 최적화 PPO : App Store A/B 테스트 가이드

iOS 15에서 출시된 이후, Apple은 앱 개발자들에게 PPO(Product Page Optimization)라는 네이티브 A/B 테스트 도구를 제공하여 라이브 앱 스토어 트래픽에서 앱 페이지의 최대 3가지 변형을 테스트할 수 있는 기회를 제공합니다. 크리에이티브 A/B 테스트는 앱 개발자들이 앱의 메타데이터의 다양한 측면을 테스트하고 전환율 최적화를 위한 가장 효과적인 자산을 발견할 수 있게 해줍니다.

AppTweak의 ASO 타임라인을 통해 App Store의 어떤 앱이나 게임의 PPO 테스트를 모니터링하고 시각화할 수 있습니다.  경쟁업체가 A/B 테스트 중인 크리에이티브를 볼 수 있으며 경쟁 우위를 확보하기 위한 인사이트를 얻을 수 있습니다.(Google Play의 A/B 테스트에도 사용 가능).

이 블로그에서는 제품 페이지 최적화 PPO 가 어떻게 작동하는지 살펴보고 PPO를 최대한 활용하는 다양한 전략을 설명하겠습니다.

제품 페이지 최적화 PPO 란?

제품 페이지 최적화 PPO는 iOS 기능 중 하나로, 앱 스토어에서 스토어 자산을 최적화하는 방법을 제공하여 앱 스토어에서의 전환 퍼널을 최적화하는 새로운 방법을 제공합니다. 이것은 제품 페이지 자산의 다양한 변형을 실험해보고, 앱/게임을 다운로드할 수 있도록 스토어 방문자를 효과적으로 설득하는 것을 찾아내는 기회를 제공합니다.

예를 들어, PPO 테스트의 결과는 다음과 같은 인사이트를 제공합니다:

• 스토어 방문자에게 가장 많이 와 닿는 기능 또는 가치 제안
• 서로 다른 시장에서 전환을 촉진하는 데 도움이 되는 최상의 현지화된 콘텐츠
• 계절성이 반영된 크리에이티브 제공
• 기타

제품 페이지 최적화 PPO 가 ASO에 중요한 이유는 무엇입니까?

앱 마케터와 개발자들은 iOS 15 제품 페이지 최적화가 ASO의 판도를 바꿀 수 있다고 생각합니다. App Store에서 기본적으로 제공되는 이 A/B 테스트 기능은 앱의 전환율을 최적화하는 데 도움이 되며, 경쟁에서 앞서 나갈 수 있을 뿐만 아니라 앱 다운로드를 크게 향상시킬 수 있습니다. 크리에이티브 자산 최적화가 잠재적인 유저의 의사 결정 프로세스에 어떤 영향을 미치는지 이해할 수 있는 강력한 도구이며, 결과적으로 성공적인 크리에이티브 집합을 만드는 데 도움이 될 수 있습니다.

제품 페이지 최적화 PPO 로 테스트할 수 있는 자산은 무엇입니까?

iOS 15 업데이트를 통해 App Store에서 스크린샷, 앱 아이콘, 앱 미리보기 동영상 등 3가지 앱 크리에이티브를 테스트하고 최대 3가지 제품 페이지 버전을 원본과 비교할 수 있습니다.

PPO 테스트를 구성하기 전에 주의해야 할 몇 가지 사항이 있습니다:

• 유저 수에 대한 백분율을 선택하여 트리트먼트가 무작위로 표시될 유저 비율을 설정할 수 있으며, 또한 3가지 다른 버전에 대한 트래픽 할당을 선택할 수 있습니다.
• 테스트는 최대 90일 동안 실행될 수 있습니다.
• 테스트를 다른 언어로 로컬화할 수도 있지만, 로컬 앱 페이지를 만든 언어에 대해서만 이를 수행할 수 있습니다.
• 마지막으로, 제품 페이지 테스트 자산을 앱 바이너리나 앱 빌드와는 별개로 검토용으로 제출해야 합니다. 앱 아이콘의 A/B 테스트를 진행할 때는 다른 버전을 앱 바이너리에 제출하고 앱 빌드의 표준 검토 과정을 거쳐야 합니다.

PPO vs. 스토어 목록 실험 (Store Listing Experiment)

PPO와 Google Play의 스토어 목록 실험과의 주요 차이점은 다음과 같습니다:

• 하나의 주요 차이점은 Apple이 크리에이티브 자산만을 테스트할 수 있도록 허용한다는 것입니다. Google Play에서는 짧은 설명과 긴 설명을 A/B 테스트할 수도 있습니다.
• 제품 페이지 최적화는 크리에이티브 테스트를 Apple의 심사에 제출해야 한다는 점입니다. Google 실험에서는 원할 때 테스트를 설정할 수 있습니다.
• 또한 Android 아이콘을 테스트할 때마다 새로운 앱 버전을 출시할 필요가 없습니다. 그러나 PPO 아이콘 실험의 경우 새로운 앱 빌드의 이진 파일에 아이콘을 포함해야 합니다
• 마지막으로, PPO 테스트의 최대 기간은 90일입니다. Google Play의 A/B 테스트는 무제한 기간 동안 실행할 수 있습니다.

제품 페이지의 다양한 자산 테스트

PPO를 사용하여 제품 페이지 테스트를 만들기 전에 테스트할 내용과 그 이유를 잘 생각해 보세요. 어떤 사람들에게는 스크린샷을 개선하는 것이 우선순위가 될 것이고, 다른 사람들에게는 앱 미리보기 동영상을 추가할지 여부가 주요 관심사입니다. 현재 유저에게 가장 중요한 브랜드 또는 제품 요소와 앱을 어떻게 돋보이게 할 수 있는지 평가합니다.

PPO를 사용하여 제품 페이지의 다양한 자산을 테스트할 때는 다음 모범 사례를 고려하세요:

기능별 테스트

다양한 요소를 테스트하여 앱의 가장 매력적인 기능, 가치 제안 및 매력적인 시각 자료를 식별합니다. 스크린샷에서 가치 제안을 강조하면 전환율이 증가합니까? 아니면 기존 스크린샷을 보여주는 것이 새 스크린샷보다 더 많은 다운로드를 가져오나요?

예를 들어, Expedia 여행 앱은 첫 번째 스크린샷에 어떤 가치 제안을 표시할지 실험할 수 있었습니다. 무료로 취소 예약 옵션이나 회원이 될 수 있는 혜택 중 하나입니다. 테스트 결과는 Expedia가 유저들에게 가장 큰 반향을 일으키고 더 많은 사람들이 앱을 다운로드하도록 설득하는 크리에이티브를 선택하는 데 도움이 될 것입니다.

테마별 테스트

계절별 콘텐츠를 테스트하여 계절성을 반영하도록 앱 아이콘 또는 기타 자산을 업데이트하는 것이 앱 전환율을 높이는 데 도움이 되는지 확인할 수 있습니다.

예를 들어, 쇼핑 앱은 휴가 시즌과 축제 기간 동안 어떤 이미지가 유저들이 앱을 다운로드하도록 설득하는지 보기 위해 프로모션과 제안을 홍보하는 크리에이티브를 실험하는 것이 좋습니다. 게임은 다양한 명절 테마의 눈이나 할로윈과 같은 계절을 테스트함으로써 휴가철을 반영할 수 있습니다.

새로운 콘텐츠 또는 캐릭터로 테스트

새로운 콘텐츠를 전시하는 것이 일반 콘텐츠보다 더 많은 참여를 유발하는지 또는 문화적으로 관련된 콘텐츠를 강조 표시하는 것이 특정 지역에서의 다운로드 증가로 이어지는지를 이해하기 위한 테스트입니다.

예를 들어, 게임 Harry Potter: Puzzles & Spells는 아이콘에 대한 테스트를 실행할 수 있고 어떤 것이 유저들에게 가장 잘 반향을 일으키는지를 식별하기 위해 다른 캐릭터들을 포함할 수 있습니다.

크리에이티브별 테스트

스크린샷 배경의 색상 변화를 테스트하여 어떤 변화가 가장 성과가 높은지 또는 앱 미리 보기 동영상을 추가하면 전환율이 향상되는지 확인하는 작업이 포함될 수 있습니다.

예를 들어, 앱 Yelp는 최근 스크린샷의 디자인을 개선했습니다. 이제, 제품 페이지 최적화를 통해, 앱은 실제로 A/B 테스트를 실행하여 구현하기 전에 전환 상승을 더 잘 이해할 수 있었습니다.

경쟁업체의 App Store A/B Test (PPO) 확인 방법

AppTweak를 사용하여 앱 스토어의 어떤 앱 또는 게임의 PPO 테스트를 쉽게 모니터링하고 시각화할 수 있습니다:

타임라인에서 주황색 선은 당신의 앱 또는 경쟁 업체에 대한 PPO 테스트를 나타냅니다. 이러한 인사이트는 직접 Apple로부터 제공되며, 각 변형에 할당된 실제 트래픽 분배와 함께 테스트된 요소(아이콘, 스크린샷 또는 미리보기 비디오)를 시각적으로 확인할 수 있습니다.

AppTweak의 PPO 데이터를 통해 경쟁업체의 모바일 마케팅 전략에 대한 중요한 인사이트를 얻고, 그들이 테스트하는 크리에이티브를 발견하며 시장과 가장 일치하는 요소를 쉽게 식별할 수 있습니다.

App Store에서 A/B 테스트를 생성할 때 중요한 고려 사항

제품 페이지 최적화 작업을 최대한 활용하려면 다음과 같은 요소를 염두에 두어야 합니다:

트래픽 비율

제품 페이지 자산의 수정 버전을 임의로 볼 방문자 비율입니다. 원래 제품 페이지로 보낼 트래픽 양을 대체 버전과 비교하여 선택할 수 있습니다. 예를 들어 트래픽의 50%를 테스트에 할당하면 나머지 50%는 원래 제품 페이지로 이동합니다. PPO에 할당된 50%는 각 처리 간에 분배됩니다. (두 개의 처리가 있는 경우 각 처리가 전체 트래픽의 25%를 차지합니다).

가설

A/B 테스트를 실행하는 목적만을 가지고 하는 것은 실패할 가능성이 높습니다. 대신, A/B 테스트를 실행하려면 불확실한 가설이 있고 검증하고 싶을 때 진행해야 합니다. 가설은 일반적으로 다음과 같이 정의됩니다: “만약 [원인]을 변경하면, [결과]가 나타날 것이다, 왜냐하면 [이유]입니다.” 예를 들어, “만약 내 아이콘을 피자로 변경하면, 내 전환율은 5% 증가할 것이다, 왜냐하면 대부분의 사용자가 피자를 주문하기 때문입니다.” 가능한 구체적으로 가설을 설정하여 확고한 가설을 갖도록 노력하십시오.

A/B 테스트의 모든 것을 것을 알아보세요 (영문)

자산 및 트리트먼트

테스트에 포함할 제품 페이지 자료와 생성할 버전 수를 검토합니다. 혼란스러운 결과를 피하기 위해 한 번에 하나의 자산을 테스트하는 것이 좋습니다.

현지화

어떤 현지화를 테스트에 포함할 가치가 있는지 자문해 보세요. 예를 들어, 영어 앱 페이지에 대해 과감한 A/B 테스트를 수행하고 싶지만 엄격한 브랜드 지침을 준수해야 하고 주요 유저를 테스트에 노출시키고 싶지 않다면, 미국보다 훨씬 작은 호주나 뉴질랜드에서 대신 A/B 테스트를 수행할 수 있습니다. 또한 테스트에 둘 이상의 지역을 추가할 때 모든 지역에 대한 결과가 한 번에 표시되며 변형이 한 지역에서 더 나은 성능을 발휘하는지 여부는 표시되지 않습니다.

테스트 기간

테스트 기간을 고려합니다. App Store에서 A/B 테스트를 시작하면 앱 제품 페이지의 퍼포먼스를 기준으로 시간 추정치를 제공하여 90% 신뢰도 목표를 설정합니다. 원하는 개선 값을 선택해야 견적을 얻을 수 있습니다. 테스트는 상당한 규모의 잠재 유저가 테스트한 모든 버전을 방문할 때까지 실행되어야 합니다. 그러나 테스트는 90일 이상 실행될 수 없습니다.

제품 페이지 최적화를 통한 A/B 테스트의 한계

App Store에서 A/B 테스트는 오랫동안 기대되었지만 아직 많은 개발자들의 기대에 부응하지 못했습니다. 대신 App Store 개발자들은 다음과 같은 여러 가지 문제에 직면한 것으로 보입니다:

• 제품 페이지 최적화 변형은 iOS 15 이상을 사용하는 App Store 유저에게만 표시됩니다. 외부 채널 또는 이전 버전의 유저에게는 기본 제품 페이지가 표시됩니다.
• 테스트하기 전에 모든 테스트(아이콘, 스크린샷 및 앱 미리 보기)를 App Store에서 검토해야 하며, 이 작업은 최대 24시간이 소요될 수 있습니다. 앱 아이콘은 다음 버전 업데이트의 앱 바이너리에 포함되어야 합니다.
• PPO는 전체 고객 여정으로 확장됩니다. 아이콘 변형이 앱 바이너리에 있기 때문에 유저가 스토어에서 보는 변형은 앱을 다운로드했을 때 휴대폰에서 보는 것과 같습니다.
• 여러 로케일에 대해 테스트를 실행하면 보고서에서 로케일을 구분할 수 없습니다. 따라서 로케일별 테스트 결과를 더 잘 이해하려면 로케일별로 다른 테스트를 만들어야 합니다. 한 번에 하나의 테스트만 실행할 수 있기 때문에 이 작업을 순차적으로 수행해야 하므로 시간이 매우 오래 걸릴 수 있습니다.
• 테스트 결과는 아주 낮은 신뢰 구간(90%)을 나타내어 테스트에 대한 어떠한 결론을 내리고 테스트된 버전 중 하나를 적용할지 결정하기가 어렵습니다. 90%의 신뢰 구간은 PPO가 제시한 결과가 틀릴 가능성이 10번 중 1번 있다는 것을 의미합니다. 따라서 테스트를 실행한 후 본 결과가 “가짜 긍정”일 수 있기 때문에 테스트를 적용하면 전환율이 감소할 수도 있습니다.
• 테스트하는 변형은 고유해야 하므로 A/B/B 테스트를 실행할 수 없습니다.

첫 번째 PPO 테스트 설정 방법

첫 번째 iOS 15 제품 페이지 최적화 테스트를 원활하게 실행할 수 있도록 종합적인 체크리스트를 작성했습니다:

1 단계: 테스트 생성

테스트를 만들려면 왼쪽 메뉴에서 “제품 페이지 최적화”를 선택합니다. 이전에 테스트를 만들지 않은 경우 “테스트 만들기”를 클릭하거나 “제품 페이지 최적화” 옆에 있는 추가(+) 단추를 누릅니다.

2단계: 테스트 이름 지정

테스트 이름(최대 64자)을 만듭니다. App Analytics에서 결과를 볼 때 테스트를 쉽게 식별할 수 있도록 설명으로 작성합니다. 예를 들어, “Easter 2022 Screenshot Characters Test with 3 characters”입니다.

3단계: 트리트먼트 횟수 선택

최대 3가지 트리트먼트를 포함할 수 있습니다.

4단계: 트래픽 할당 결정

원래 App Store 제품 페이지 대신 트리트먼트를 표시하도록 임의로 선택할 유저의 비율을 선택합니다. 기본 제품 페이지와 다른 트리트먼트 간에 트래픽을 동일하게 분할하는 것이 좋습니다.

5단계: 현지화 선택

테스트를 현지화하는 경우 로케일을 선택합니다. 현재 앱 버전 내의 로케일만 테스트에 포함될 수 있습니다.

6단계: 테스트 기간을 계산

목표 달성 시간을 예측하려면 “테스트 기간 추정”을 클릭하고 전환율에서 원하는 개선을 선택합니다. 테스트는 최대 90일 동안 실행되어 해당 시간 내에 원하는 결과에 도달했는지 확인할 수 있습니다. 또한 해당 시간 범위에서 테스트를 수동으로 종료할 수 있습니다. 테스트에 더 많은 트리트먼트를 추가할수록 확실한 결과에 도달하는 데 시간이 더 걸릴 수 있습니다.

7단계: 테스트 트리트먼트 시작

“테스트 생성”을 누릅니다. 실제로 결과에 영향을 미친 요인을 쉽게 식별할 수 있도록 특정 시간에 트리트먼트에서 변경할 요인의 수를 제한합니다. 모든 크리에이티브 자산을 사용하려면 먼저 App Review에서 승인해야 합니다. 그러나 앱 아이콘이 아닌 경우에는 테스트를 시작하기 위해 새 버전을 릴리스할 필요가 없습니다.

8단계: 테스트 모니터링

App Store Connect의 App Analytics에서는 테스트를 실행한 다음 하루 후에 변환, 노출, 개선, 신뢰도 등의 성능 메트릭을 평가할 수 있습니다. 기존 제품 페이지를 기준으로 이러한 메트릭을 측정할 수 있습니다.

9단계: 트리트먼트 구현

테스트 결과에 따라 원래 제품 페이지에 트리트먼트를 적용하여 App Store 방문자에게 표시할 수 있습니다. 테스트가 실행 중인 동안 트리트먼트를 적용하면 현재 테스트가 종료됩니다. 따라서 트리트먼트를 서둘러 구현하거나 테스트를 종료하기 전에 한 가지 이상의 트리트먼트가 현재 기준보다 더 나은 성능을 발휘하는지 또는 더 나쁜 성능을 발휘하는지 여부를 두고 관찰하는 것이 좋습니다.

App Store에서 A/B 테스트를 위한 모범 사례

제품 페이지 최적화(PPO)를 최대한 활용하기 위한 몇 가지 모범 사례를 함께 정리해보았습니다.

1. 가설의 강도에 따라 테스트를 설정합니다

제품의 강점, 모범 사례 및 업계 동향을 파악하기 위해 내부 및 외부 조사를 수행합니다. 다음으로, 정의된 가설과 예측된 결과를 제시합니다. 가설이 유저 및/또는 어떤 이해 관계자에게 테스트 결과로부터 이익을 얻을 수 있는지 자문해 보십시오. 예를 들어, 새 배경색을 테스트하는 것은 테스트하는 이유에 따라 경미하거나 중요할 수 있습니다. (예: 유저가 특정 색을 선호하는지 여부를 평가하거나 스크린샷 요소를 더 선명하게 만드는 것)

2. Google Play의 A/B 전략을 iOS에 적용하지 마세요

iOS에서 A/B 테스트를 수행할 때 고려해야 할 또 다른 중요한 사항은 Google Play에서 사용하는 것과 다른 크리에이티브를 테스트하는 것입니다. Apple과 Google은 유저 행동, 앱 인기도 및 가장 중요한 유저 인터페이스에서 현저한 차이를 보이는 두 가지 다른 플랫폼입니다. 즉, 동일한 크리에이티브를 동일하게 볼 수 없습니다.

3. 너무 일찍 테스트를 마치지 마세요

콘솔이 테스트를 완료할 때까지 기다리는 것이 이상적입니다. 예를 들어, 게임의 상위 유저가 주말에 더 활동적인 경우 월요일에 테스트를 시작한 후 3일 만에 중지하면 결과가 정확하지 않고 실제로 향후 테스트 주기에 영향을 줄 수 있습니다. 따라서 최소 1주일 이상 7일 단위로 테스트를 실행하는 것이 좋습니다.

4. 다운로드에 영향을 미칠 수 있는 외부 요인을 주의합니다

예를 들어, 블랙 프라이데이나 사이버 먼데이와 같은 명절이나 축제는 쇼핑 앱의 다운로드에 영향을 미칠 수 있습니다. 또한 테스트가 즉시 종료되는 새 앱 릴리스를 주의하세요.

5. 적합한 유저를 위한 최적화합니다

앱 또는 게임에 적합한 유저를 선택합니다. 유저의 출신지를 아는 것은 올바른 최적화 기술을 만드는 데 큰 도움이 될 수 있습니다. 또한 다른 시장에서 앱/게임을 사용할 수 있는 경우, 앱 스토어 자산을 특정 지역 또는 문화에 맞게 현지화하는 것이 테스트 계획의 중요한 고려 사항입니다.

6. 한 번에 하나의 자산 테스트합니다

한 번에 하나의 스토어 목록 자산만 테스트하는 것이 가장 좋습니다. 테스트을 수행하는 동안에도 차이를 만들 수 있을 정도로 테스트 편차가 눈에 띄고 유의한지 확인하십시오. 사소한 변경으로 인해 원하는 결과가 나오지 않을 수 있습니다.

7.  테스트 반복합니다

최적화 작업은 일회성 작업이 아닙니다. 모든 테스트에서 긍정적인 결과가 나오는 것도 아닙니다. 이 경우 테스트 계획을 다시 평가하고 다시 테스트합니다. 테스트 결과를 분석하고 가장 잘 수행되는 트리트먼트를 식별합니다. 결정적인 결과를 얻으면 더 나은 성능의 크리에이티브로 제품 페이지를 업데이트합니다.

결론

앱 스토어의 제품 페이지 최적화 PPO는 데이터 기반 방식으로 앱의 크리에이티브 변경 사항의 효과를 테스트하는 유용한 도구입니다. 또한 여러 가지 변형을 실제 앱 스토어 트래픽에 적용할 수 있는 유일한 도구로, 편향되지 않은 샘플 및 결과를 얻을 수 있습니다.

가설을 수립하고 모범 사례를 따라 PPO 테스트를 준비하는 것은 품질 높은 A/B 테스트를 만드는 핵심입니다. 올바르게 수행되면 A/B 테스트를 통해 전환율을 향상시키거나 대상 관객에 대한 유용한 통찰력을 얻어 마케팅 노력을 지원할 수 있습니다.

AppTweak를 사용하여 경쟁 업체의 메타데이터 업데이트, A/B 테스트, PPO, 앱 내 이벤트 및 기타 정보를 시각화하고 모니터링하세요.

무료 체험판 시작하기