Tipy pro testování A / B v experimentech Google Play

Google Play

Pro vývojáře aplikací pro Android Experimenty Google Play může poskytnout cenné informace a pomoci zvýšit počet instalací. Spuštění dobře navrženého a dobře naplánovaného testu A / B může znamenat rozdíl mezi uživatelem, který instaluje vaši aplikaci, nebo konkurencí. Existuje však mnoho případů, kdy byly testy provedeny nesprávně. Tyto chyby mohou působit proti aplikaci a poškodit její výkon.

Zde je návod k použití Experimenty Google Play pro A / B testování.

Nastavení experimentu Google Play

Ke konzole Experiment se dostanete z řídicího panelu aplikace Google Play Developer Console. Jít do Uložit přítomnost na levé straně obrazovky a vyberte Experimenty se záznamem v obchodu. Odtud můžete vybrat možnost „Nový experiment“ a nastavit test.

Můžete spustit dva typy experimentů: Výchozí grafický experiment a Lokalizovaný experiment. Výchozí grafický experiment spustí testy pouze v regionech s jazykem, který jste vybrali jako výchozí. Localized Experiment, na druhé straně, spustí váš test v jakékoli oblasti, ve které je vaše aplikace k dispozici.

První umožňuje otestovat kreativní prvky, jako jsou ikony a snímky obrazovky, druhá umožňuje otestovat krátké a dlouhé popisy.

Při výběru testovacích variant mějte na paměti, že čím více variant testujete, tím déle může trvat, než dosáhnete realizovatelných výsledků. Příliš mnoho variant může vést k tomu, že testy vyžadují více času a provozu, aby se vytvořil interval spolehlivosti, který určuje možný dopad konverze.

Porozumění výsledkům experimentu

Při provádění testů můžete měřit výsledky na základě prvních instalačních programů nebo retenčních instalačních programů (jeden den). Prvotní instalační programy jsou celkové převody vázané na variantu, přičemž retainovaní instalační uživatelé jsou uživatelé, kteří si aplikaci nechali po prvním dni.

Konzole také poskytuje informace o aktuálních (uživatelé, kteří mají nainstalovanou aplikaci) a škálovaném (kolik instalací byste hypoteticky získali, kdyby varianta během testovacího období získala 100% provozu).

Experimenty Google Play a testování A / B

Interval spolehlivosti 90% je generován po dostatečně dlouhém běhu testu, aby bylo možné získat užitečné informace. Zobrazuje červený / zelený pruh, který označuje, jak by se konverze teoreticky upravily, kdyby byla varianta nasazena živě. Pokud je sloupec zelený, jedná se o pozitivní posun, červený, pokud je záporný, a / nebo obě barvy znamenají, že by se mohl pohybovat v obou směrech.

Doporučené postupy pro testování A / B na Google Play

Když provádíte test A / B, budete chtít počkat, dokud nebude stanoven interval spolehlivosti, než provedete jakékoli závěry. Instalace na variantu se mohou během celého procesu testování posunout, takže bez spuštění testu dostatečně dlouho na to, aby byla zajištěna úroveň důvěryhodnosti, by varianty při živém použití mohly fungovat odlišně.

Pokud není dostatek provozu k vytvoření intervalu spolehlivosti, můžete každý týden porovnávat trendy konverzí a zjistit, zda se objeví nějaké konzistence.

Budete také chtít sledovat dopad po nasazení. I když interval spolehlivosti uvádí, že testovaná varianta by fungovala lépe, její skutečná výkonnost se stále může lišit, zvláště pokud byl interval červená / zelená.

Po nasazení testovací varianty sledujte dojmy a sledujte, jak jsou ovlivněny. Skutečný dopad se může lišit od předpokládaného.

Jakmile určíte, které varianty fungují nejlépe, budete chtít iterovat a aktualizovat. Součástí cíle testování A / B je najít nové způsoby, jak se zlepšit. Poté, co jste se dozvěděli, co funguje, můžete vytvořit nové varianty, které budou mít na paměti výsledky.

Experimenty Google Play a výsledky testování A / B

Například při práci s AVIS prošel Gummicube několika koly testování A / B. To pomohlo určit, které kreativní prvky a zprávy nejlépe převádějí uživatele. Tento přístup přinesl 28% nárůst konverzí pouze z testů hrané grafiky.

Iterace je důležitá pro růst vaší aplikace. Pomáhá vám neustále zvyšovat počet konverzí, jak vaše úsilí roste.

závěr

A / B testování může být skvělý způsob, jak vylepšit vaši aplikaci a celkově Optimalizace obchodu s aplikacemi. Při nastavování testu nezapomeňte omezit počet variant, které testujete najednou, aby se výsledky testu urychlily.

Během testu sledujte, jak jsou ovlivněny vaše instalace a co zobrazuje interval spolehlivosti. Čím více uživatelů uvidí vaši aplikaci, tím větší jsou vaše šance na vytvoření konzistentního trendu, který ověří výsledky.

Nakonec budete chtít neustále iterovat. Každá iterace vám pomůže zjistit, co převádí uživatele nejlépe, takže můžete lépe pochopit, jak optimalizovat vaši aplikaci a škálovat. Použitím metodického přístupu k testování A / B může vývojář pracovat na dalším rozšiřování své aplikace.

Co si myslíte?

Tyto stránky používají Akismet k omezení spamu. Zjistěte, jak jsou vaše údaje komentářů zpracovávány.