Իրական խնդիրներ PlayAnalytic թիմի պրակտիկայից՝ ինչն էր սխալ, ինչ արեցինք և ինչ փոխվեց
Ընկերությունների անվանումները և բացարձակ ցուցանիշները թաքցված են գաղտնիության պայմանների համաձայն, մետրիկաները ներկայացված են հարաբերական տեսքով։ Յուրաքանչյուր նախագծի արդյունքը կախված է ելակետային տվյալներից և համատեքստից և երաշխիք չէ
Մանրածախ ցանց և e‑commerce · CRM
Հերքեցինք պատվիրատուի նախկինում հաշվարկված գնահատականը՝ +77%-ը դարձավ +5%
առաջին գնահատական vs ճիշտ գնահատական՝ ~16 անգամ գերագնահատում
+77% → +4,8%
գնման կոնվերսիային՝ ողջ թեստային խմբում
+4,8%
կոնվերսիային՝ նրանց շրջանում, ում հաղորդակցությունը հասել է
+7,2%
վերադարձին՝ բարձր միջին չեկով և 6–12 ամիս դադարով սեգմենտում
+0,32 տ.կ
Խնդիրը
Անհրաժեշտ էր հասկանալ, թե որքան են CRM հաղորդակցությունները (SMS, push, email) բերում այն գնումներից ավելի, որոնք հաճախորդներն առանց այդ էլ կկատարեին
Ինչ արեցինք
Նախագծեցինք գլոբալ վերահսկիչ խումբ՝ հաճախորդներ, որոնց մեկ ամսվա ընթացքում որևէ հաղորդակցություն չի ուղարկվում
Ստուգեցինք խմբերի հավասարակշռությունը պատմական տվյալների վրա՝ մինչև թեստի մեկնարկը
Հայտնաբերեցինք ընտրության էֆեկտ՝ նամակագրության ծառայություն բեռնելիս թեստային խմբից դուրս մնաց հաճախորդների 52%-ը, վերահսկիչ խմբից՝ 18%-ը, ընդ որում դուրս էին մնում ավելի պասիվները
Վերահաշվարկեցինք էֆեկտը ըստ սկզբնական պատահական բաշխման և առանձին անցկացրինք SMS‑ների սեգմենտային A/B թեստ
Արդյունքը
Ընկերությունը ստացավ CRM‑ի ինկրեմենտալ եկամտի աշխատող գնահատական և մասշտաբավորման չափանիշ՝ էֆեկտը պետք է ծածկի զեղչերն ու ալիքների արժեքը։ «Բոլորին» նամակագրությունների փոխարեն հայտնվեց պատասխան, թե կոնկրետ ում գրել
Կարևո՛ր է Էֆեկտը դրական է, բայց վիճակագրական նշանակալիության սահմանին՝ եկամտի վստահության միջակայքը ներառում է զրոն։ Մենք ինքներս տեղեկացրինք այդ մասին և պլանավորեցինք կրկնակի թեստ՝ ճիշտ զտված վերահսկիչ խմբով
Ցուցափեղկերի շեղումը հաշվառման համակարգից իջավ մինչև 0,2%՝ ձեռքով համադրումներն այլևս պետք չեն
ցուցափեղկերի շեղում հաշվառման համակարգից՝ ըստ եկամտի և ինքնարժեքի
0,2%
ավելի արագ հաճախորդների հաշվետվության թարմացում
×3
երկու մանրածախ ցանցերի գնորդների պատմությունները միավորված են
2 → 1
Խնդիրը
Հաշվետվությունների թվերը չէին համընկնում հաշվառման համակարգի հետ, մարքեթփլեյսների, մեծածախի և CRM‑ի տվյալները գտնվում էին տարբեր տեղերում, իսկ շաբաթական առևտրային հաշվետվությունը հավաքվում էր ձեռքով
Ինչ արեցինք
Պահոցում ինտեգրեցինք մարքեթփլեյսների, ERP‑ից մեծածախ վաճառքների, պատվերների համակարգի և CRM հարթակի տվյալները
Կառուցեցինք եկամտի և ինքնարժեքի, տարեցտարի վաճառքների, թվային ապրանքների և նախնական պատվերների ցուցափեղկեր
Գործարկեցինք հոլդինգի տերմինների բառարան և համաձայնեցրինք վիճելի սահմանումները (օրինակ՝ «նորույթ»)
Ստեղծեցինք հաշվառման համակարգի տվյալների որակի դաշբորդ և սկսեցինք տվյալների ծագման քարտեզը (lineage)
Արդյունքը
Ցուցափեղկերում եկամտին և ինքնարժեքին կարելի է վստահել առանց ձեռքով համադրման․ շաբաթական առևտրային հաշվետվությունը կառուցվում է միևնույն տվյալների հիման վրա, իսկ «որտեղի՞ց է այս թիվը» հարցին կա գրավոր պատասխան
Գտանք «ոչ մեկին չպատկանող» տրաֆիկը և որոնողական ալիքին վերադարձրինք նրա ներդրումը
նոր օգտատերեր վերագրվեցին ալիքին
+5,4%
վերադարձած օգտատերեր վերագրվեցին ալիքին
+8,1%
կորուստ այլ գովազդային աղբյուրների մոտ
0%
ավելի արագ ատրիբուցիայի վերահաշվարկ
×16
Խնդիրը
Ներգրավման հաշվետվությունները թերագնահատում էին որոնողական գովազդը, իսկ վերադարձած օգտատերերի ատրիբուցիայի վերահաշվարկը տևում էր կես օր և դանդաղեցնում բյուջետային որոշումները
Ինչ արեցինք
Իրականացրեցինք հղումների նշագրման աուդիտ և գտանք չնշագրված պիտակով անցումներ, որոնք չէին վերագրվում ոչ մի աղբյուրի
Ուղղեցինք նշագրումը և վերահաշվարկեցինք մեկ տարվա պատմությունը
Վեբ վերլուծության հաշվիչը կարգավորեցինք ավտորիզացիայի դոմենում այնպես, որ սեսիան չընդհատվի, և կարգավորեցինք օֆլայն կոնվերսիաների փոխանցումը գովազդային կաբինետներ
Արդյունքը
Ալիքն այս ողջ ընթացքում աշխատում էր ավելի լավ, քան ցույց էին տալիս հաշվետվությունները։ Բյուջետային որոշումներն այժմ հիմնվում են ազնիվ թվերի վրա, իսկ ատրիբուցիայի վերահաշվարկը կես օրվա փոխարեն տեղավորվում է կարճ ժամանակահատվածում
Համոզեցինք հրաժարվել 20% զեղչից և պահպանեցինք եկամուտը՝ առանց փորձարկման
ակտիվ միջուկի խաղացողներից արդեն ամբողջությամբ զբաղեցրել են հիմնական սլոթները
50–60%
եկամտի՝ ուղղակի գնումներ, որոնց վրա ազդում է զեղչը
20–28%
ավելի ցածր արտահոսք նման իրեր գնողների մոտ
×2
Խնդիրը
Պրոդուկտային թիմը ցանկանում էր գործարկել 20% համընդհանուր զեղչ խաղային իրերի վրա, որոնք ակտիվանում են գնումից անմիջապես հետո՝ հույս ունենալով ավելացնել վաճառքները
Ինչ արեցինք
Կառուցեցինք հագեցվածության մոդել՝ խաղային օրերի որ մասում են ակտիվ խաղացողների հիմնական սլոթներն արդեն զբաղեցված իրերով
Եկամուտը բաժանեցինք ուղղակի գնումների և հավաքածուների ու մակարդակների միջոցով կատարվող գնումների
Նման իրեր գնող խաղացողների արտահոսքը համեմատեցինք մնացած բազայի հետ
Հաշվարկեցինք զեղչի սցենարները սլոթների յուրաքանչյուր տեսակի համար
Արդյունքը
Մոդելը ցույց տվեց, որ զեղչը սլոթների մեծ մասը կտաներ մինուս․ հագեցած միջուկն ավելի շատ չի խաղա, և եկամուտը պարզապես կնվազի զեղչի չափով։ Զեղչը չգործարկվեց․ առաջարկեցինք կետային զեղչեր միայն փոփոխական սլոթների համար, որտեղ կարևորը հավաքածուն է, այլ ոչ թե ժամաչափը։ Միաժամանակ ապացուցեցինք, որ նման իրերն աշխատում են պահպանման, այլ ոչ թե ակնթարթային եկամտի համար
Ցույց տվեցինք, որ սոցիալական մեխանիկաները խաղի տնտեսության լծակ են
միջին ծախսերը գիլդիաներում գտնվող խաղացողների մոտ
×12,5
ավելի բարձր վճարողների բաժին (17%՝ 3%-ի դիմաց)
×5,7
ավելի շատ գնումներ մեկ խաղացողի հաշվով
×10,8
Խնդիրը
Թիմին անհրաժեշտ էր հասկանալ՝ արժե՞ արդյոք ներդրումներ անել խաղացողներին միավորող մեխանիկաներում, և որտեղ են խաղացողները կորչում մինչև «միջուկ» անցնելը
Ինչ արեցինք
Հավաքեցինք սոցիալական ակտիվության դաշբորդ մի քանի նախագծերի համար՝ ավելի քան մեկ միլիոն տող տվյալ
Համեմատեցինք գիլդիաներում և դրանցից դուրս գտնվող խաղացողներին՝ ըստ ծախսերի, գնումների և վճարողների բաժնի
Անցկացրինք արտահոսքի կոհորտային վերլուծություն մինչև լսարանի միջուկ մտնելը
Պատրաստեցինք խաղացողների հանդերձանքի և առաջընթացի հաշվետվություն և ավտոմատացրինք տվյալների հավաքումը
Արդյունքը
Սոցիալական մեխանիկաները սկսեցին դիտարկել որպես նախագծի տնտեսության լծակ, այլ ոչ թե «սոցիալականություն՝ հանուն սոցիալականության»։ Կոհորտային վերլուծությունը գտավ խաղացողների խումբ, որոնց արտահոսքն արագանում է կյանքի ցիկլի որոշակի փուլում․ սա պրոդուկտային փոփոխությունների կետ է
Կարևո՛ր է Սա դիտարկվող օրինաչափություն է, այլ ոչ թե ապացուցված պատճառ․ հնարավոր է, որ գիլդիաներին ավելի հաճախ միանում են արդեն ներգրավված խաղացողները։ Պատճառահետևանքային կապը ստուգելու համար առաջարկեցինք պլանավորել փորձարկում
Վերլուծության բաժնի աշխատանքը կառուցեցինք որպես ծառայություն բիզնեսի համար
առաջադրանքների՝ միասնական թրեքերով և SLA‑ով սահմանված ժամկետներով
100%
վերլուծաբան (հիմնական և փոխարինող) յուրաքանչյուր նախագծում
2
հաշվետվությունների և հետազոտությունների կատալոգ՝ ցրված հղումների փոխարեն
1
Խնդիրը
Առաջադրանքները գալիս էին տարբեր ալիքներով, ժամկետներն անկանխատեսելի էին, հաշվետվություններն ու հետազոտությունները՝ ցրված, իսկ ներքին պատվիրատուները չէին հասկանում, թե ինչ հարցերով կարելի է դիմել վերլուծաբաններին
Ինչ արեցինք
Հարցում անցկացրինք ավելի քան 50 ներքին պատվիրատուների շրջանում և կազմեցինք բարելավումների պլան՝ արագության, տվյալների որակի և թափանցիկության ուղղությամբ
Բոլոր առաջադրանքները տեղափոխեցինք միասնական թրեքեր, սահմանեցինք առաջադրանքների տեսակներն ու SLA‑ները
Ստեղծեցինք վիքի՝ հաշվետվությունների կատալոգ, հետազոտությունների կատալոգ, մեթոդաբանության ստանդարտ, տերմինների բառարան
Յուրաքանչյուր նախագծի ամրացրինք հիմնական և փոխարինող վերլուծաբան, ներդրեցինք SQL կոդի միասնական ոճ և արհեստական բանականության հետ աշխատելու կանոններ
Գործարկեցինք ամսական ամփոփագիր՝ բիզնեսին հասկանալի լեզվով
Արդյունքը
Վերլուծությունը դարձավ կանխատեսելի ծառայություն՝ պարզ է, թե որտեղ և ինչպես ներկայացնել առաջադրանքը, որքան սպասել պատասխանին և որտեղ գտնել արդեն պատրաստ հաշվետվությունը։ Հնացած հաշվետվությունները արխիվացվել են, իսկ տվյալների բազայի բեռնվածությունը նվազել է