AI məhsul tövsiyələri, onları görən alıcıları görməyən bənzər alıcılarla müqayisə edərək, sonra ziyarətçi başına gəlir, konversiya dərəcəsi, orta sifariş dəyəri və marjaya baxaraq düzgün ölçülür. Vidjet klikləri və satıcılardan gələn “təsirli gəlir” rəqəmləri təsiri şişirdir, çünki bu alıcıların çoxu onsuz da alış-veriş edəcəkdi. Yaxşı bir idarəetmə paneli, kataloq əhatəsi və keyfiyyət yoxlamaları ilə yanaşı, hər bir bölmə üçün real artımı göstərir.
Satıcı rəqəmləri niyə yanıltıcıdır?
Əksər tövsiyə alətləri “tövsiyələrdən gələn gəlir” və ya “təsirli gəlir” haqqında məlumat verir. Bu, adətən vidjetdə kliklənmiş məhsulu ehtiva edən hər hansı bir sifarişi, bəzən uzun bir müddət ərzində hesablayır. Eyni məhsulu axtarış vasitəsilə tapacaq bir alıcı hələ də hesablanır.
Bu rəqəmlər bir alət daxilindəki bölmələri müqayisə etmək üçün faydalıdır. Onlar artan dəyərin sübutu deyil. Bunun üçün sizə nəzarət qrupu lazımdır.
Holdout testi nədir və onu necə keçirmək olar?
Holdout testi trafikin təsadüfi bölünməsini həyata keçirir. Bir qrup tövsiyələri normal şəkildə görür; digəri isə blokun olmaması və ya sadə ən çox satılanlar siyahısı kimi bir ehtiyat variant görür. Yetərli vaxtdan sonra qruplar arasındakı nəticələri müqayisə edirsiniz.
- Test ediləcək bölməni seçin, məsələn, məhsul səhifəsindəki “bənzər məhsullar”
- İtirilmiş gəliri məhdudlaşdırmaq üçün ziyarətçiləri təsadüfi olaraq, çox vaxt 90/10 və ya 80/20 nisbətində bölün
- Bölünməni sessiyalar üzrə ziyarətçi üçün sabit saxlayın
- Həftə içi nümunələrini əhatə etmək üçün ən azı iki tam həftə, az trafikli mağazalar üçün isə daha uzun müddət işlədin
- Ziyarətçi başına gəliri, konversiya dərəcəsini və orta sifariş dəyərini müqayisə edin
- Qərar verməzdən əvvəl statistik əhəmiyyəti yoxlayın
Dynamic Yield, Bloomreach və ticarət üçün Vertex AI Search daxil olmaqla bir çox platforma daxili eksperiment alətləri təklif edir. Daha kiçik mağazalarda Google Optimize-ın istifadədən çıxarılması komandaları VWO, Optimizely və ya platformaya xas A/B xüsusiyyətləri kimi alətlərə yönəltdi.
Hansı KPI-lar daha vacibdir?
Onları biznes təsiri, cəlbetmə, kataloq sağlamlığı və keyfiyyət üzrə qruplaşdırın.
Biznes təsiri
- Ziyarətçi başına gəlir: artımın ən yaxşı xülasəsi
- Konversiya dərəcəsi
- Orta sifariş dəyəri və sifariş başına məhsul sayı
- Sifariş başına ümumi marja, çünki ucuz əlavələr sifariş dəyərini artıra və mənfəəti azalda bilər
- Fərdiləşdirilmiş bölmələr üçün 60-90 gün ərzində təkrar alış dərəcəsi
Cəlbetmə
- Tövsiyə blokunda klikləmə dərəcəsi
- Tövsiyə olunan məhsullardan səbətə əlavə etmə dərəcəsi
- Tövsiyə ilə qarşılıqlı əlaqədə olan sessiyaların payı
Kataloq sağlamlığı
- Əhatə dairəsi: tövsiyə olunan aktiv məhsulların payı
- Konsentrasiya: ilk 10 məhsula gedən tövsiyə təəssüratlarının payı
- Yeni məhsulların ilk həftələrindəki məruz qalması
Keyfiyyət
- Stokda olmayan məhsulların göstərilməsi
- Əl ilə yoxlama zamanı tapılan qəribə və ya əlaqəsiz təkliflər
- Tövsiyələr vasitəsilə alınan məhsullar üçün geri qaytarılma dərəcəsi
Əhatə dairəsi və konsentrasiya niyə vacibdir?
Tövsiyə modelləri çoxlu məlumatı olan məhsullara üstünlük verir. Nəzarətsiz qaldıqda, onlar hər yerdə eyni ən çox satılanları göstərir və kataloqun uzun quyruğu görünməz qalır. Bu, yeni kolleksiyalara zərər verir və satışdakı məhsulları kənara itələyə bilər.
Əhatə dairəsini və konsentrasiyanı aylıq izləyin. Əgər ilk on məhsul təəssüratların çoxunu alırsa, yeni məhsullar üçün müxtəliflik qaydaları və ya təkanlar əlavə edin, sonra ziyarətçi başına gəlirin qorunub saxlanıldığını yoxlayın.
İdarə paneli necə görünməlidir?
Hər auditoriya üçün bir ekranla məhdudlaşdırın. Rəhbərliyə artım və marja lazımdır; e-ticarət komandasına isə slot detalları lazımdır.
- Xülasə: ziyarətçi başına gəlir və marja, test qrupu və nəzarət qrupu, etibarlılıq aralıqları ilə
- Slot cədvəli: hər slotun strategiyası, CTR, səbətə əlavə etmə dərəcəsi və test edildiyi yerdə ölçülmüş artım
- Kataloq paneli: əhatə dairəsi, konsentrasiya və yeni məhsulun görünməsi
- Keyfiyyət paneli: stokda olmayanlar, əl ilə yoxlama bayraqları, geri qaytarılma dərəcəsi
- Test jurnalı: nə dəyişdirildi, nə vaxt və nəticə nə oldu
Məlumatlar adətən tövsiyə platformasından, Google Analytics 4 kimi analitik vasitələrdən və mağazanın sifariş bazasından gəlir. Onları Looker Studio, Power BI və ya BigQuery kimi anbarlarda birləşdirin. İdarə panelində metrik təriflərini yazın ki, onlar sabit qalsın.
Hansı səhvlər nəticələri təhrif edir?
Kiçik quraşdırma səhvləri testi yararsız edə bilər.
- Bir qrup irəlidə görünəndə testləri vaxtından əvvəl bitirmək
- Eyni slotda eyni anda bir neçə test aparmaq
- Qruplar əvəzinə dövrləri müqayisə etmək, beləliklə mövsümlər nəticəni təhrif edir
- Məlumatlarda botları və daxili trafikə məhəl qoymamaq
- Marja olmadan gəliri hesablamaq
Test nə qədər davam etməlidir və nə qədər böyük olmalıdır?
Tək bir cavab yoxdur, çünki bu trafikdən və gözlədiyiniz effektin nə qədər böyük olmasından asılıdır. Gündə on minlərlə ziyarətçisi olan bir mağaza iki həftə ərzində kiçik artımları aşkar edə bilər. Kiçik bir mağazaya bir ay və ya daha çox vaxt lazım ola bilər və yalnız böyük fərqləri aşkar edə bilər.
Onlayn nümunə ölçüsü kalkulyatorları kömək edir. Cari konversiya dərəcənizi və hərəkətə keçməyə dəyər ən kiçik artımı daxil edin və alət hər qrupun neçə ziyarətçiyə ehtiyacı olduğunu sizə deyir. Əgər rəqəm trafikinizdən çox uzaqdırsa, iki oxşar strategiya əvəzinə tövsiyələr və ya heç bir tövsiyə kimi daha böyük bir dəyişikliyi test edin.
- Qərarı dəyişdirəcək minimum artımı müəyyənləşdirin
- Başlamazdan əvvəl nümunə ölçüsünü hesablayın
- Nəticə yaxşı göründüyü üçün testi vaxtından əvvəl dayandırmayın
- Heç bir fərq göstərmədikdə belə nəticəni qeyd edin
Tövsiyələri ömürlük dəyərlə necə əlaqələndirirsiniz?
Qısa testlər ilk sifarişi əhatə edir. Fərdiləşdirilmiş tövsiyələr həmçinin alıcıların gələn ay nə alacağını, nə qədər tez-tez qayıdacağını və yeni kateqoriyalara keçib-keçməyəcəyini dəyişə bilər. Bu effektlərin görünməsi daha çox vaxt tələb edir.
Kifayət qədər təkrar alıcısı olan mağazalar üçün, məsələn, müştərilərin 5 faizi kimi, heç vaxt fərdiləşdirilmiş bloklar və ya e-poçtlar almayan kiçik bir uzunmüddətli nəzarət qrupu saxlayın. Onların 90 günlük gəlirlərini qalanları ilə müqayisə edin. Fərdiləşdirmənin loyallıq yaratdığını və ya sadəcə alış vaxtını dəyişdirdiyini görməyin ən aydın yolu budur.
Alien Road tövsiyə ölçməsini necə tətbiq edir
Tipik bir e-ticarət əlaqəsində, biz əvvəlcə izləməni yoxlayırıq: məhsul baxışı, səbətə əlavə etmə və məhsul ID-ləri ilə satınalma hadisələri, üstəgəl razılığın idarə edilməsi. Təmiz hadisələr olmadan, heç bir tövsiyə hesabatına etibar etmək olmaz.
Sonra əsas slotlarda nəzarət testləri qururuq, idarə panelini analitika, platforma və sifariş məlumatlarından qururuq və müştərinin komandası ilə tərifləri razılaşdırırıq. Testlər hər dəfə bir slotda aparılır.
Aylıq hesabatlar etibarlılıq aralıqları, marja təsiri, kataloq əhatəsi və test jurnalı ilə ölçülmüş artımı göstərir. Bir slot artım göstərmədikdə, biz bunu deyirik və fərqli bir strategiya təklif edirik və ya onu silirik, çünki hər blok səhifədə yer üçün rəqabət aparır.
Bu həftə haradan başlamaq lazımdır
Tövsiyə alətinizin gəliri necə bildirdiyini yoxlayın və onun atributsiya qaydasını yazın. Sonra ən çox məşğul olan tövsiyə slotunuzu seçin və platformanın test funksiyasından və ya A/B alətinizdən istifadə edərək 90/10 nəzarət qrupu qurun. Onu ən azı iki həftə işlədin və qruplar arasında ziyarətçi başına gəliri müqayisə edin. Həmin bir test sizə sonrakı hər bir qərar üçün əsl baza xətti verir.