Noindex و nofollow

Noindex هي تعليمة تُستبعد بموجبها الصفحة من فهرس محرك البحث، على الرغم من أنها تظل متاحة للزوار. يتم كتابتها كعلامة ميتا في رأس الصفحة أو في رأس استجابة الخادم. أما Nofollow فتطلب من الروبوت عدم اتباع الروابط الموجودة على الصفحة، أو تُستخدم مع رابط واحد محدد. من المفيد استبعاد الصفحات التي لا تتمتع بقيمة مستقلة من الفهرس – مثل نتائج البحث الداخلي، وصفحات الشكر، وأقسام تسجيل الدخول والمستخدمين، والإصدارات التجريبية، والقوائم المكررة. وشرط فعالية هذه العملية هو أن يُسمح للروبوت بتنزيل الصفحة، أي ألا تكون محظورة في نفس الوقت في ملف robots.txt. بعد التنفيذ، يُنصح بالتحقق من أدوات المشرفين للتأكد من أن الصفحة قد أُزيلت بالفعل من الفهرس. بالنسبة للمواقع الكبيرة، يُنصح بإعداد قائمة بالأقسام التي تم استبعادها من الفهرس عن قصد، حتى لا يتم اعتبارها أخطاءً عند إجراء تدقيق لاحق.

انظر أيضًا: ملف robots.txt، تضخم الفهرس، المحتوى الضئيل.