Здравствуйте! На сайте сделали фильтр, много ненужных страниц стало выходить в поиск, сделали 301 редирект, теперь поиск их выкидывает, но через какое то время опять возвращает. Подскажите, как от них избавиться? Если закрывать robots.txt, надо каждую страницу отдельно закрывать?