Scraping dynamického obsahu

Scraping dynamického obsahu rieši situáciu, keď sa údaje na stránke nenachádzajú v pôvodnom zdrojovom kóde, ale doplní ich skript až po načítaní. Jednoduchý nástroj stiahne prázdnu kostru a dáta nevidí. Riešením býva použitie prehliadača bez grafického rozhrania, ktorý stránku skutočne vykreslí a počká na dokončenie načítania. Tento postup je rádovo náročnejší na výkon aj čas, preto sa pri väčších objemoch neoplatí. Lacnejšou alternatívou je nájsť rozhranie, z ktorého si stránka údaje sama sťahuje, a čerpať priamo z neho, ak to podmienky používania dovoľujú. Pri návrhu riešenia treba počítať s tým, že dynamické stránky sa menia častejšie a zber si vyžaduje priebežnú údržbu.

Pozri aj: API ako zdroj dát, vykresľovanie JavaScriptu, monitorovanie zberu.