dobrý den nebo možna dále
vy tam byla zase nějak to výsledek je o tom že je to dřina která
možná není na první pohled vidět
já se nechal ten kde a já jsem a nekuřák no pracujeme pro brněnskou firmu
trubic
když tady byla před chvílí bára zašel týmu
na přednášce bude se vám mezi dokázat konkrétní věci konkrétní příklady konkrétní testy který sme
na naší weby udělali na to si dát pozor a
ukazovat vám to budeme našich bedrech že tripomatic plánovač výletu
na vyčerpání o tom že vyhledávač konej letenek
a já se začne s prvním nástrojem který používáme je to optimalizuji používáme o pro
a ve testování a chci se zeptat
zkusil to někdo už používal optimizer někdo
jeden
já si nepočítal dva
tak asi představě spíš toto je
můžeme na tomto na aby testování
mušce tam zkoušet spoustu věcí funguje to na rozjet ostatních
mezi to od ostatních
naprosto funguje i s javascriptem
rovnou sestavíme si vnuceny
je to poměrně levná záležitost záleží vždycky na tom je s
máte ten tak
velký malý středními používáme dvacet tisíc pježis což stojí sedmdesát jedna dolarů za měsíc a
nikdy se nám to ještě nepodařilo přesáhnout
konkrétně
ale to nikdy nemůžete všechny ty pježis protože mne testujete
netestuje té
ne všechny značce litr efekt S T to jenom konkrétní kontem stránky nebo obsahové stránky
popřípadě trošku segmentace uživatele
jo rozmyslelo samotný vložení do optimizer do stránek je primitivní to je jednoduchý jak bulharska
striptérka prostě dáte do hlavičky vložení jednoho těla skriptu
pokud používáte integrace z nula na let access pravděpodobně bude se tak je potřeba do
si pozor na to aby tenleten cot předcházel kódu google analytik jinak to nebude správně
posílat invenci a marketingu se budou se šedivě že
nevychází čísla který si naplánovali souš tak jednoduchý není jsou samotný a B testy pokud
se pouštíte do složitější věcí tak potřebujete znát či kvéry
základně k dispozici wysiwyg editory jestli ty abbe namalujete nebo prostě přepíšete ale to pochopitelně
funguje jenom u staticky jo webu u dynamický ho do musíte brát javascriptem
co se zastavíme u osamoceně jo z interfejs
potom zase vytvoříte nějaký ten experimenty nacpete tam a šablonou pomocí u role a pak
dali s ní pracujete
můžete tady přidáváte nahoře
různé varianty těch variant může být kolik chcete
na pravé straně vidíte že si můžete zkontrolovat textu potom bude vypadat přes intra či
mode
máte nějaké nastavení přes ovšem co přesně sto šablonu a já chcete dělat kam cíli
nahoře můžete zcela cíle které sou určitě důležité
se podíváme teďka základní cíle jako jmenné prostory od mezi samo můžete dále nastoupil S
lze cíle podle určitých metrik
třeba přechody na různé další role stránky a sledovat co tam uživatele nebo kolik uživatele
to děla
když přidáváte další cíl můžete hlasovat právě ty metriky A ty vidíte paging s co
chcete sledovat přes jakou role a název toho cíle
toto je střílení uživatelů se že hodně podstatná věc no ty majzli
tady nastavuje to je
přímo komu se ta šablona má ten test na zobrazit není to ovládání šablon není
role stránek
ale adres nemůžete jsou potřeba nové uživatele
nebo s všechny uživatele
potom tam je nastavování různých regulars takže tento meč tak to sou věci jak chcete
soubor ale stran restrurl adresu pracovat
ale to je na samostatné školení todle eště se podívejte na temných co je tam
dole
pokud bude toto mezi používat jedno pěkně vysvětleny
hodně podstatné taky analytik integration
všechny ty se si můžete propojit analytik a výsledky potom sledovat přímo tam
jak prasečí nastavit správné sloty
dejte si pozor časování
aby se nastaví různé experimenty na jeden sloupce přepisují navzájem
teďka si ukážeme na pár našich výsledku který jsme dosáhli na konverzní poměry a tak
dále
přímo začneme
naše se sem na tripomatic u kde sme zkoušeli testovat T obsahové stránky je to
přímo se zbytek destinace
na základě a ve testů jsme provedli design
této stránky a zjistili jsme že je mnohem lepší spát P N teda tlačítka na
nahoru naspod
cože viditelná stránka obrazovky dnes zumování drzost rolování
a výsledek toho vyšel takovýdle
konverzní poměr na tlačítko první verzi to strasse půl procenta na druhé verzi čtyřicet čtyři
procent větu testovanou na celkem vzorku
uživatelů
další naše se sem bylo trošku zklamáním protože sme si mysleli prostory sme video hlavní
stránce oproti obrázku na hlavní stránce a my se jsme si že
zvítězí video
které nás a posune nám ty content konverzní poměr mnohem víc nahoru a nakonec se
skončilo tak
všelijak dokonce ten brzy poměr toho nižší
prozkoušeli vrstva se jaký ledajaký
je ty
co všechno rozhoduje počet obsahu nebo množství obsahu na stránce toto jsou zrovna čtyři různé
varianty stránek resignací a zjistili jsme že čili obsahu na stránce působila teda konverzní poměry
hlavních tlačítek
že se podíváte ty výsledky
nejlepší své konce třikrát lepší než ta nejhorší
že v některých případech to může být opravdu vylepšení
další testy tady základní má vliv
titulek na stránce ná konverzní poměr nebo nemá smysl už ano devatenáct procent ku osy
nejhorším taky nemuselo velkém testovaném vzorku lidí
potom nás netestuje navečer lajn že naším web na prodej letenek
testovali jsme toto vidíte to sou výsledky vyhledávání a ty spodní soše chatičky které přechází
přímo do před nakoupeni letenky a testovali jsme
barevnosti se tlačítek můžeme ste ruďas takovou ke hlasování
kdo si myslí že vyhrálo zvířata číslo první variantách zvedne ruku
prosím že to modré tlačítko ať zvedne ruku
co z dva které si myslí že to bylo červené tlačítko
asi stejný počet lidí
myslím že to bylo šedé tlačítko
jeden
agresiv že zelené tlačítko
úplně všichni
takže tady jsou výsledky
nejlepší konverzní poměr mělo tmavé šedé tlačítko
testovala se to asi na čtyři tisíc uživatelů
a my si myslíme že to možná to má vliv na novém překlopení nula a
vektoru nájezd šest které sou tlačítka ne že by asi mělo vliv ale my vlastně
nevíme proč to také jo pro nás to bylo taky překvapení a když si všimněte
krajové šest máte stačí tedy tak slyšeli takže si to asi soudruzi
s americe taky změřili a
záhada
důležitý je že se tam hodně řešilo ještě regionálně jo voni jinak likely američani jinak
klikl evropa možná čína by hodně klikl a na červenou
no takže to bylo tak práskačku překvapení
a na dalším testem to byl můj mysl zkusit C
tenhle velký formulář časem si myslel že
čili číslem formulář bude tím více zabere prostoru pro uživatele a začnu používat
nakonec jsme zjistili že tomu tak úplně není
toto jsou konverzní proměnné tlačítka původního a velké velkého proto formuláře
potom sme také testovali toto je detail
detail aerolinky na našem webu večer nula jedna a zjistili jsme že konkrétní texty tlačítkách
červených pokud
směřují národem jaké dobré tam psát nás aerolinky aby uživatele viděli co přesně se stane
a nejenom si neurčité věci jako more info čili filtru more info
a teď si myslí michal naším dalším nástroj tak další oblíbenej nástroj na uživatelský testování
něj vize presented com zase bych se zeptal jestli to někdo z vás používá
ano málo pět
k aspoň se dozvíte
je to
vlastně náš nejdelší nástroje to základní balík jsou tři uživatele za těchto sedumnáct dolarů a
každý další stojí třicet devět dolarů navíc
ten
ten nástroje o tom že vy lidem dáváte konkrétní scénáře můžete sledovat jak přesně
ten úkol plnily
co je se jim přitom zdálo dobrý co špatný vidíte chyby který by vás obecné
napadli je důležitý právě ten scénář napsat co nejlíp protože je to relativně drahý tři
lidi co test rezerva pozic
více a můžete s deset minut sledovat jak bloudi po nějakým webu co se nám
stalo měli sme zadání naplánujte syna tripomatic u výhod kam chcete do typu swrite výlet
stáhněte si pdfko si to jednoduše ale
skoro každej nám tam přešel na pokyn do zkoumat abysme deset minut koukali na to
jak si vybírá kalendáře na vokýnku datumy a hotely billovi třeba dobrý změnit nezdržujte se
výběrem konkrétní hotelu vemte si jakýkoliv a prostě ty se na naše věci
tady si může prostě takle konkrétně vypadá
takový výsledek zvuky com roky sou mezi ze přes ten k
škoda že nemůže musím video protože vy tam přímo těch lidí slyšíte když se podíváte
vpravo nahoru tak tam jejich zadání a vy přímo slyšíte jako
voni říkali no tak tady je jasně tady je kalendář takže tady si vyberu data
tak si skočím nikam takhle někdy je to až jakobín špatně protože poznat že ty
lidi jsou docela zkušení test těmito pochopitelně dělejte peníze takže mají třeba i motivaci to
mít rychle za sebou fouknout ještě další test protože to je nějaká taková práce z
domova
ale
většinou jako ty výsledky s obrazu s přínosný a
jako by novinka je že se tím dají testovací mobilní aplikace to zas tady máme
teďkom tripomatic co sme si aplikaci tripomatic toto sme si nechali testovat tam to ty
lidi prostě položili před kameru očistím plní prostě zase nějaký úkol nevýhoda je že vlastně
tady nepřirozený G telefonovat si to položí a šli potom prste
přirozenější pochopitelně ovládání palcem ale i tak za na ty aplikace hodí protože
jiná možnost jedině pak zánětlivých rysy nemají žádnou zkušenost nemůžete to dělat firmě když
někdo tu aplikaci znát protože u špatná složitý nějaký stereotypy
u toho Z resting dot com se nedá moc zvolit jaký lidi chcete aby to
používali můžete si říct se regionálně jakou je striktně co voni si tam jako tak
rychle jak se cítí zkušený ale to je tak všechno
a kvalita výsledku Y zpracování tím výsledkem je třeba půlhodinový video demise pak takže i
vy sám to video pustí zapíše si podstatný chyby který mu přišli že ty lidi
dělaj nebo co naopak se povedlo pak se těch pět lidí sejde předvede to co
si napsali a z toho se vyberou ty nejpodstatnější věci
který se v dalším sprintu opravujou
aby se mohli napsat zase další scénáře provize testy
no a jedním z další nástroj u tady sme zužovali průsek
standardní otázka používat to někdo z vás
nikdo
tady té nástroje slouží pro zachytávání efektivní obrazu obrazovky uživatele včetně pohybu myši klikání na
určité věci
tlačítka psaní formulářů a tak dále
nevýhodou toho je že to neumí zaříkávač a skriptové akce to znamená že pokud máte
web narvaný javascriptem tak to nepoužijete pokud osum standardní nebo nějaké jednoduché stránky kde chcete
sledovat klikání na tlačítko k upřímně nebo něco takového tak je to ideální
když to nepoužíváme protože
no a právě máme tak obklíčila skriptem
cenná je relativně lovná a můžete to místo totiž zadarmo protože
houstek nabízí každý měsíc s infuzi sto kredit zdarma znamená stopy si zdarma
takže záleží na vás
jak to budete využívat
a proto tou tenzi zadarmo
vložení do stránek dupe to se primitivní že jo skriptové cot
a ten se postará všechno kvalita výsledku je zase k dispozici vlastně viděl který ale
bohužel je generovaný strojem ve smyslu že on si zaznamenává pohyby myší a pak se
to snaží napasovat na ten ve a právě neumí odchytávat idiotsky to vidí vemte tak
by tam jako víte že on klikl někde do vzduchu protože nám tam vyskočí nějaký
popad menu který ale todleto nezobrazí
takže se to přes tady používat protože pro naše weby je to
docela k ničemu a navíc každá stránka vyvolá vytváří nový vyzařuje každý L stránky vytváří
nový video takže vy pak musíte proklikat se nějakou desítkou videí je ten člověk se
po těch stránkách pohyboval
ale pro některý kdyby to může mít využití jazzovým
stojí za zmínku
no a posledním nástrojem pretty představíme stretch ještě znají jakou analytik do todlencto používá
všichni dva se dobře
je to tak super nástroji no
vlastně všechny naše se světě toho ty majzli
asi a nějaké další a nástroje které poža nekončí srágoru byl analytické si můžeme dobře
segmentovací výsledky můžeme vidět nejvíc výsledků rastrovací různé
události a tak dále
A oproti ostatními všichni víte se na to zdarma
důležitý je tak je to segmentace uživatelů můžete se dělit uživatele nové
staré můžete si nastavovat řezy pouze uživatele které prošly nějakým cílem se dalšího naším je
musí výsledku je tam to tak strašně moc
co my děláme pro dobré výsledky nastavené události nebo lidi ten ty
které ve kterých naslyše si ukážeme shodila
tak rozdělené traffic právě mezi ty uživatele nově příchozí nové pouze ty které navštívili určitou
stránku a nebo prošli právě jedno si události nebo centry se nastavím a
jo tady další zbytečně javascript každej zná jak se vkládá
byla tyto stránky ale tady je právě to měření event u
seš má nějakou strukturu mpeg tady konkrétní příklady jsou tam prostě kategorie akce a hodnota
ty akce že standardizace but nějaký číselná hodnota akce vzory vyhodnocovat tady konkrétně vidíte že
změříme na homepage i jak se kliká na tlačítka a konkrétní todle events klika tlačítka
který vytváří ty
sme si proto udělal ještě vlastní nevlastní wrapper kolem toho aby se nám to lee
při vývoji cestovalo protože když sme na developmentu page i tak chceme vidět jak ty
jakési se skutečně logu jo u ty data jak potřebujeme a na bysme neřešili až
po release u
že sis marketingu stěžují že tam ty data nemají a my bysme mu na produkci
zaprvé přes nějakou síťovou komunikaci zkoumali se nám to tam lze dobrý použito
nějaký lépe a
a místo pod kontrolou
no a takhle nějak vypadají výsledky event u těch událostí tady sme třeba zkoušeli a
to sou výsledky po filtrování na mapě a na to přesně uživatele přes přesně vybíraj
nemáme tady třeba ascii ports nebo translation to sme zkušená tripomatic o na mapě má
můžete znovu ty výsledky segmentovat podle toho jak chcete
filtrovat potom dalšího pracovat
jeho máme tady učte dál takovou závěrečnou tabulkou kde sme se snažili porovnat přínosy a
zápory v optimizer i
ne nám to ne z auta jednoduchý na použití prostě pro ty naše testy potřebujeme
co do javaskriptu na druhou stranu je to hodně levný a ten rozsah použití je
variabilní
na to aby testování se dál otestovat spousta věcí a kvalita výsledku je super v
tom že prostě ve finále na ten nějaký čísla nemusíte trávit nějaký dlouhý čas
v obrázku
takhle
existuje stejných má podle nás primitivní zadání tam jenom prostě potřeba napsat pár vět nadace
pozor na to aby ty uživatele dělali to co potřebujem
je to docela drahý je to jednoúčelový prostě chcete stejný ale kvalita výsledkový přestože té
video je prázdnost přínosná a spoustu věcí sme na základě Z pingu překlepali
a to dost radikálně prosím prostě viděli že ti lidi se tam ztrácej
můstek je jednoduchej je levnej ale
nero sem použití byl pro nás hlavně kvalitou výsledku nepoužitelnej ze s těch zmíněných důvodu
prostě pro nás to bylo takový jako
že sme viděli půlku toho webu a
a ještě to dlouhý zpracování výsledku je každá pečlivé samostatnými že jo
google analytik tak to znáte a to už možná
buďto strávíte dne čtením dokumentace a nebo nějaký dražší školení ale na druhou stranu je
to zadarmo je to univerzální změří se tím že jo
je všechno pro i naše výsledky tam všechny směřujou abysme si to mohli filtrová seskupovat
takže to je taky pro nás použito není
široce použitelné nástroj
slední grafice todlencto je grafiky jo nástroje používáme jak moc o pro nás ty výsledky
cenný
kostech procesory používat všech sem říkala
proto můžeme nesleduje stránky javascriptem a taky pro nás bezpředmětný
vzorkován překládáme jestli synku protože ty výsledky sou asi neefektivnější vidíte přímá ti uživatelé na
tom pracují to můžete udělat dobře to špatně co můžete předělat
a tak dále a jistě hlavních je taky optimalizujete rises tady bavili aby testování asi
neječ nástroj který používáme a všechny výsledky končit bonity
s kterým potom dále pracujeme
jak se na to všechno mříže trošku rychle si sme mysleli tak pro mají telefonu
tady máme killer call tak kalo vlastním že posoudit
radím že tesáno zdarma naší aplikace je tripomatic
pro sme právě pustili je pro letouny
může se nám sací tak jak se vám líbí a pokud by nedejbože byly nějaký
dotazy
vědět a chvíl
dotaz marku dotaz
rychlé bych se chtěl zeptat
izolace čekala věc tačem R
jo zopakujte tohoto
otázka byla jsme zkoušeli normální uživatelské testování například protihře sestru který A pro nás řeší
nezkoušeli jsme normální testování
ale testovali jsme na název firmě my máme týmy rozdělena which online tripomatic občas nezkoušeli
testovat lidi s tripomatic u navečer lion opačně takže to bylo takové různé testované komise
to nemyslel že teda je to že nedostupný ale prostě sentence nás znamená že jo
dva a půl tisíce a zvenčí efektivit jako zánět lidi trávit s nima ten čas
do monitoru zaznamenávat to co dělaj takovýto že malina na to nepřetekl efektivní
ale že budem zánět nějaký jo že výsledky budou kvalitnější s čem
kdybysme jako vyhodnotili že to odplatil takto můžem reklamovat pochopitelně a hlavně my třeba jako
střílíme na svět jo my bysme tady třeba sehnali těch i studenty a takhle to
je dobrý ale třeba ne na všechno co potřebujeme o nepotře mi tam jako řeknem
chceme prostě američany
protože potřebuje vidět jak to tě američani ovládají
když může nahrát velkou roli a zase jako
shánět tak v reálu američan a
klesá ládovat bude mít čas jako ty peníze s jako za to stojí ale když
člověk splete ten scénáře a pak tam deset minut kouká na úplný zbytečnosti
tak je to škoda na
no prosím
tak otázka zněla nashle který se tam měli že to nechám řeč najít
je to možná někde ve třetině otázka zněla jestli sme
nejdříve testovali stránku a potom na základě costner když věnovali anebo jestli s investory ty
lesák napříč bylo to tak že sme nejdříve testovali chtěli smyslu slabé testu na té
první stránce a poté co sme zjistili že veliko rozsah toho obsahu záleží na tom
jestli to tlačítko na spodem nebo ne
tak na základě toho sme předělali a tourist otočit nahoru a výsledek se postavil
ten
tak otázka byla
jsou to stejná tlačítka že jedno z nich mají textový ne
ano
sou torza tlačítka ale je to ten hlavnice tam prvek který jsme sledovali možný testovali
jsme různé texty na těch tlačítkách
nějakým způsobem sem si na základě tohodle testu toho prvního vyhodnocovaly co všechno chcete uživatel
vidět
a na základě poslední předělali tesla číslo R jsou nahoru
ano je jinde má jinej líbil ale vede na stejnou akci
ruje temple ne
samotný do plánování toho jo
otázka byla bodů vzor
a byl ten že to tlačítko dole na prvním slajdu může
mít jiný cíl také nějakou jinou hodnotu oproti tomu hornímu
co sme taky zjišťovali todlencto bylo měřený konverzní poměr pouze na následující stránku ale takový
cíl toho tlačítka prvním fázi mysleme disky několik cílů znamená spotřeba na planner v tomhle
případě na mapu a potom následně stažení pdfka a tak dále
a toto byl konverzní poměr ten teristet a následně zvyšovali pouze na planner
no na mapu to testování na stažení tedé se na to proč by se mělo
tam rozdíl pěti procentech zlepšení to com koncového cílového poměrně samozřejmě záleží na tom že
po začít nebo máš počítač co plandry ten uživatel čeká něco jiného
ale když to po visual začíná musa čase mapa kterou viděl při tom prvním tlačítku
potřeboval být nějaký výsledek toho typu a tak dále
jo jsou to různá tlačítka ale ten konverzní poměr kliku na ně
její
takže ten jo ještě za
no todlencto se otázka byla
otázka byla jestli sme testovali různé respirace které nebo které destilace nejvíce fungují
todlencto přesně nevím analyk stručně máme
máme co ve stránky prostě všech destinací a todlecto jenom ukázka jedné z nich a
testovali jsme
todleto budete se úplně všechny z nich tuším
tak na osumdesát procent jistý
že to budete zprávy na úplně všechny
destinace nejenom na todle konkrétní třeba o tu C F S
jo tak to jak je něco populární vyhodnocujeme i tím jaksi lidi plánující výlety takže
to nastane potřeme analytik ty data máme na základě těch
o který se tvoří
jo takže
to můžem spíš o to asi
radujeme nebo vybíráme podle naší
otázka zněla jestli vysoký které nebo jestli sem vyhodnocujeme výsledky našich cestu s napadala děláme
dobrá otázka
samozřejmě děláme si třeba příkladě toho i ze snímku tam si řekneme kam je důležitý
červené prostory můžeme dělat duše vývojáře auto a B testování sesedneme a zjistíme jako sem
perverzní R konverzní poměr na rozdíl mezi sebou třeba šestnáct sedmnáct proces nehraje takovou roli
spočítáme si to kolik dostalo na vývoji ta změna a popřípadě potom to předěláme ale
jako čas je to pro nás dobrý impulz o často spotřeboval docela data konverzní rozvine
řekl vezmu průměrem a že to předěláváme jo není to úplně a omega pro nás
právě testování a vidíme jak moc
jakost uživatele používají o třeba to my sme testovali ty tlačítka tak tam todleto číslo
které sme měli původní verzi rozkoš úplně nejhůře proto jsme teďka zařadili do vývoje předávání
naše data čísla
nebo podobnej případ byl třeba s tím vyjde na homepage kde se prostě nějakej úvodní
obrázek na hradě lidem a ve výsledku nám to
těch abeced stack nedopadlo nějak dobře tak
kdyby byla ty nějaká přednášky nebo někdo nám bude říkat kde strašně super že tam
budete mít sex něhož prostě na základě letí sem to nepůjdem nehledě na to že
to video se musí výroby jo ten efekt vlastně pro nás byl té mizené máme
to změřený takže radši jako než dávat jenom na takový dojmy a něm intuice jako
vyschlá když funguje ale čísla jsou čísla no se
neměl se nám prostě neosvědčil někde setřel svědčí ale není to jana univerzální pravda minimálně
na našem webu to nefungovalo
to je asi by selektujte přednášky takže
testujte
nerozvedete se podle
plně úplně podle intuice a devastaci ty tečné peníze