Analýza logov servera

Analýza logov servera je vyhodnotenie záznamov o všetkých požiadavkách na váš web vrátane tých od vyhľadávacích robotov. Je to jediný zdroj, ktorý ukazuje skutočnosť: ktoré adresy robot navštívil, ako často, aký kód odpovede dostal a koľko času čakal. Bežné audítorské nástroje simulujú prechádzanie, logy ho zaznamenávajú. Vďaka tomu odhalíte veci, ktoré inak neuvidíte, dôležité kategórie, ktoré robot nenavštívil mesiace, plytvanie prechádzaním na parametrizovaných adresách, chybové odpovede pri konkrétnych šablónach alebo prudké spomalenie servera v určitých hodinách. Pri veľkých weboch je to najrýchlejšia cesta k pochopeniu, prečo sa nový obsah dlho neindexuje. Overte si aj to, či návštevy skutočne pochádzajú od deklarovaného robota, keďže identifikáciu možno sfalšovať.

Pozri aj: crawl budget, index bloat, AI crawler.