Pravidlá pre AI roboty a riadenie ich prístupu fungujú na viacerých úrovniach a oplatí sa ich rozlišovať. Základnou je súbor robots.txt, kde možno jednotlivých robotov povoliť alebo zakázať podľa mena, čo umožňuje napríklad zakázať zber na tréning a súčasne povoliť roboty, ktoré prinášajú návštevnosť z odpovedí. Jemnejšie riadenie ponúkajú meta značky priamo na stránke, ktorými sa dá obmedziť napríklad dĺžka zobrazenej ukážky alebo použitie obrázkov. Časť platforiem rešpektuje aj špecifické značky vyjadrujúce nesúhlas s použitím obsahu na trénovanie, ich podpora však nie je jednotná. Rozhodnutie je obchodné, nie technické: úplné zablokovanie chráni obsah, no zároveň znamená, že vás v odpovediach nenájdu. Nastavenie preto prijmite vedome a zdokumentujte.
Pozri aj: AI crawler, paywall a prístup AI, analýza logov servera.
