अगर साइट बहुत सारे कम-मूल्य वाले, अनूठे सर्च URL उत्पन्न करती है (जैसे, बॉट्स या टाइपो क्वेरीज से), तो विचार करें:\n\nhtml\n<meta name=\"robots\" content=\"noindex, follow\">\n
\nलेकिन अगर आपको उम्मीद है कि उपयोगकर्ता वही क्वेरीज फिर से खोजेंगे या लंबी-पूंछ वाली क्वेरीज के लिए रैंक करना चाहते हैं, तो इसे इंडेक्सेबल रखें।