Segmentované vyhodnotenie testu znamená posúdiť výsledok nielen celkovo, ale aj po skupinách návštevníkov – podľa zariadenia, zdroja návštevy, novosti návštevníka alebo krajiny. Dôvodom je, že celkový výsledok môže skrývať dva opačné efekty: zmena, ktorá na počítači výrazne pomohla, môže na mobile škodiť a v súčte to vyzerá ako nulový výsledok. Pri segmentácii však treba postupovať opatrne. Čím viac skupín sa skúma, tým väčšia je pravdepodobnosť, že sa nájde náhodný rozdiel bez skutočného významu, a menšie segmenty majú aj menšiu vzorku. Preto sa segmenty určujú vopred spolu s hypotézou, nie dodatočne pri hľadaní priaznivého výsledku v dátach. Nález v jednom segmente sa preto považuje za podnet na ďalší test, nie za potvrdený výsledok.
Pozri aj: štatistická významnosť testu, A/B test na webe, mobilná konverznosť.
