Если сайт генерирует множество уникальных URL-адресов результатов поиска низкой ценности (например, из-за ботов или запросов с опечатками), рассмотрите вариант:
xml
<meta name="robots" content="noindex, follow">
Но если вы ожидаете, что пользователи будут снова искать те же запросы или хотите ранжироваться по запросам «длинного хвоста», оставьте их индексируемыми.