Как правильно написать файл robots.txt для индексации товаров интернет магазина?
25.02.2013 15:20:40
Как правильно написать файл robots.txt для индексации товаров интернет магазина?
|
|
|
|
06.07.2013 16:31:47
на сайте есть такая папка catalog/compare, и много загружено роботом..
Можно ли прописать - Disallow: /catalog/compare/ Не закроет ли это правило от индексации...просто site.ru/catalog/какой либо товар/.... по анализу робота на яндексе вроде как нет, но всеже, знает кто? |
||||
|
|
|||