| A | B | C | D | E | F | G | H | I | J | K | L | M | N | O | P | Q | R | S | T | U | V | W | X | Y | Z | AA | |
|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
1 | Creative Sets Results Calculator for Apple Search Ads | ||||||||||||||||||||||||||
2 | |||||||||||||||||||||||||||
3 | Input your iTunes ID or URL: | https://apps.apple.com/us/app/tripadvisor-h%C3%B4tels-restaurants/id284876795 | Choose the Country: | United Kingdom - GB | |||||||||||||||||||||||
4 | Screenshot | AP | SS 1 | SS 2 | SS 3 | SS 4 | SS 5 | SS 6 | SS 7 | SS 8 | SS 9 | SS 10 | 284876795 | 143444 | en-GB | ||||||||||||
5 | #REF! | Default Image Ad | #REF! | #REF! | #REF! | Uploaded App Preview & Screenshots | #REF! | #REF! | #REF! | #REF! | #REF! | #REF! | #REF! | ||||||||||||||
6 | |||||||||||||||||||||||||||
7 | https://is1-ssl.mzstatic.com/image/thumb/PurpleSource116/v4/d9/06/42/d9064253-2300-34d9-2a33-3ac0b0d522ef/316ab1aa-6616-448e-936e-70e658e4d71a_0_APP_IPHONE_55_0.jpg/392x696bb.jpg | https://is1-ssl.mzstatic.com/image/thumb/PurpleSource126/v4/d2/b9/60/d2b9603e-7c65-a957-48bb-e0baffb5c617/3e4866e7-9b58-4024-b621-19bcd73de5b8_1_APP_IPHONE_55_1.jpg/392x696bb.jpg | https://is1-ssl.mzstatic.com/image/thumb/PurpleSource116/v4/5e/db/ed/5edbed71-3600-a3d0-d0bd-8bf07a2e7640/2b86adf3-f688-4955-a074-b035cb1cfc19_2_APP_IPHONE_55_2.jpg/392x696bb.jpg | https://is1-ssl.mzstatic.com/image/thumb/PurpleSource116/v4/61/86/09/618609b9-da28-e00f-e569-01c5d6d5f04e/57330a07-d8f3-478c-ac45-a7d7df256fd7_3_APP_IPHONE_55_3.jpg/392x696bb.jpg | https://is1-ssl.mzstatic.com/image/thumb/PurpleSource126/v4/67/58/73/675873e6-9b62-2b4f-3ed6-af1b012b3cda/77f30b4d-23b2-4c50-8066-f23ab2e1be67_4_APP_IPHONE_55_4.jpg/392x696bb.jpg | https://is1-ssl.mzstatic.com/image/thumb/PurpleSource116/v4/91/0f/7b/910f7b4e-72ff-2a3e-8c33-d4a0d03ac765/40d8ca50-0ab1-4895-b010-2f7b807aa676_5_APP_IPHONE_55_5.jpg/392x696bb.jpg | |||||||||||||||||||||
8 | Variant A | #REF! | Variant B | #REF! | Variant C | Variant D | |||||||||||||||||||||
9 | Screenshot | SS 6 | SS 7 | SS 8 | Screenshot | SS 3 | SS 9 | SS 10 | Screenshot | Screenshot | |||||||||||||||||
10 | |||||||||||||||||||||||||||
11 | Put your creative sets data in this table: | ||||||||||||||||||||||||||
12 | |||||||||||||||||||||||||||
13 | Creative Set | Impressions | New Downloads | Conversion Rate | Standard Error | ||||||||||||||||||||||
14 | Default Image Ad | 3,164 | 279 | 8.82% | 0.50% | z-score | p-value | Alpha to reject the null | adjusted alpha to reject null | adjusted p-value | |||||||||||||||||
15 | Variant A | 2,000 | 574 | 28.70% | 1.01% | 17.59214 | 1.0000 | 0.0000 | 0.0000 | 1.0000 | |||||||||||||||||
16 | Variant B | 17.49232 | 1.0000 | 0.0000 | 0.0000 | 1.0000 | |||||||||||||||||||||
17 | Variant C | 17.49232 | 1.0000 | 0.0000 | 0.0000 | 1.0000 | |||||||||||||||||||||
18 | Variant D | 17.49232 | 1.0000 | 0.0000 | 0.0000 | 1.0000 | |||||||||||||||||||||
19 | 28.70% | ||||||||||||||||||||||||||
20 | Set your Confidence Level | 90% | |||||||||||||||||||||||||
21 | |||||||||||||||||||||||||||
22 | |||||||||||||||||||||||||||
23 | Statistical Significant Test | ||||||||||||||||||||||||||
24 | Z-test between the Default Image Ad Variant A | ||||||||||||||||||||||||||
25 | |||||||||||||||||||||||||||
26 | Default Image Ad | Conversion rate change (in percentage points) | |||||||||||||||||||||||||
27 | Conversion Rate of Default Image Ad | 8.82% | #REF! | #REF! | #REF! | 19.9 | |||||||||||||||||||||
28 | Result: The Creative Set Variant A (CVR at 28.7%) performed 19.9 percentage points better than the default image ad (CVR at 8.82%), with a 100% confidence level. | ||||||||||||||||||||||||||
29 | |||||||||||||||||||||||||||
30 | |||||||||||||||||||||||||||
31 | Significant At | ||||||||||||||||||||||||||
32 | Variant A | 90% confidence: | Yes | ||||||||||||||||||||||||
33 | Conversion Rate of Variant A | 28.70% | 95% confidence: | Yes | |||||||||||||||||||||||
34 | 99% confidence: | Yes | |||||||||||||||||||||||||
35 | Variant A is the winning variation! | z-score | 17.59 | ||||||||||||||||||||||||
36 | p-value | 100.00% | |||||||||||||||||||||||||
37 | |||||||||||||||||||||||||||
38 | |||||||||||||||||||||||||||
39 | Variant A | Based on the VWO A/B testing calculator | |||||||||||||||||||||||||