Prehľadávanie verzus indexovanie

Prehľadávanie a indexovanie sú dva samostatné kroky, ktoré sa bežne zamieňajú. Prehľadávanie znamená, že robot stránku navštívi a stiahne jej obsah. Indexovanie je až následné rozhodnutie vyhľadávača, či stránku zaradí do svojej databázy a bude ju zobrazovať vo výsledkoch. Rozlíšenie má praktický dôsledok pri riešení problémov: ak stránka nie je vo výsledkoch, treba najprv zistiť, v ktorom kroku sa zastavila. Nepreskúmaná stránka býva blokovaná v súbore robots.txt, chýbajúcim odkazom alebo chybou servera. Preskúmaná, ale nezaradená stránka signalizuje niečo iné – nedostatočnú hodnotu obsahu, duplicitu s inou stránkou alebo kanonický odkaz smerujúci inam. Obidva stavy sa dajú overiť v nástrojoch pre správcov webu, ktoré uvádzajú aj dôvod.

Pozri aj: správa pokrytia indexu, robots.txt, kanonický odkaz.