Analýza logov servera je vyhodnotenie záznamov o všetkých požiadavkách na váš web vrátane tých od vyhľadávacích robotov. Je to jediný zdroj, ktorý ukazuje skutočnosť: ktoré adresy robot navštívil, ako často, aký kód odpovede dostal a koľko času čakal. Bežné audítorské nástroje simulujú prechádzanie, logy ho zaznamenávajú. Vďaka tomu odhalíte veci, ktoré inak neuvidíte – dôležité kategórie, ktoré robot nenavštívil mesiace, plytvanie prechádzaním na parametrizovaných adresách, chybové odpovede pri konkrétnych šablónach alebo prudké spomalenie servera v určitých hodinách. Pri veľkých weboch je to najrýchlejšia cesta k pochopeniu, prečo sa nový obsah dlho neindexuje. Overte si aj to, či návštevy skutočne pochádzajú od deklarovaného robota, keďže identifikáciu možno sfalšovať.
Pozri aj: crawl budget, index bloat, AI crawler.
