Цитата |
---|
Максим Веряскин написал: Константин Д , по-моему, в стандартном роботсе от битрикс закрыто все необходимое: User-Agent: * Disallow: # empty Disallow instruction SHOULD be there Disallow: /bitrix/ Disallow: /search/ Disallow: /*q=* Disallow: /*tags=* Disallow: /auth/ Disallow: /auth.php Disallow: /*?print= Disallow: /*&print= Disallow: /*register=yes Disallow: /*forgot_password=yes Disallow: /*change_password=yes Disallow: /*login=yes Disallow: /*logout=yes Disallow: /*auth=yes Disallow: /*backurl=* Disallow: /*BACKURL=* Disallow: /*back_url=* Disallow: /*BACK_URL=* Disallow: /*back_url_admin=* Disallow: /*index.php$ Но для каждого сайта роботс уникален, все зависет от того, что вам нужно. Так же правила могут быть разные как для яндекса, так и для гугла. Единственное, что отмечу точно: если у вашего сайта есть мобильная версия, то нужно будет открыть для индексации папку с шаблоном, иначе робот криво будет видеть ваш "мобильный" сайт. И тот же самый гугл не выдаст вам пометку "mobile friendly". Disallow: /bitrix/ Allow: /bitrix/папка_вашего_шаблона/ |
Спасибо.