в robots.txt прописал:
Но при формировании карты сайта и последующей индексации все страницы этой директории в поисковой выдаче. Как закрыть директорию от движка вообще?
Код |
---|
User-agent: * Disalow: /mydir/ |
Но при формировании карты сайта и последующей индексации все страницы этой директории в поисковой выдаче. Как закрыть директорию от движка вообще?