Keď na test nie je dosť dát, dá sa rozhodovať aj inak
Nie každá zmena potrebuje A/B test. Keď dát nie je dosť, rozhodujem sa podľa toho, čo viem odmerať aj bez neho.
Test nie je jediný nástroj
A/B test odpovedá na otázku „ktorá verzia je lepšia“. Keď na jasnú odpoveď nemáme dosť návštev, tá otázka aj tak nemá zmysel.
Aj bez testu viem opraviť to, čo je zjavne rozbité. To je väčšina práce.
Podľa čoho sa rozhodujem
Podľa dopadu a istoty. Zmeny s veľkým dopadom a nízkym rizikom nasadím a sledujem dáta po nasadení. Test si nechám na to, kde sa oplatí počkať na výsledok.