А кто главнее - robots.txt или sitemap.xml?
По логике, sitemap.xml при формировании пользуется разрешениями и ограничениями, прописанными в robots.txt. Но в robots.txt нужно указывать, где лежит sitemap.
Как делать правильно - начала прописать robots.txt, потом сформировать sitemap.xml, который потом прописать в robots.txt? Или не прописывать?
И нужно ли регистрироваться в поисковой системе Яндекса? Гугл-то сам ищет, без robots.txt и sitemap.xml...
По логике, sitemap.xml при формировании пользуется разрешениями и ограничениями, прописанными в robots.txt. Но в robots.txt нужно указывать, где лежит sitemap.
Как делать правильно - начала прописать robots.txt, потом сформировать sitemap.xml, который потом прописать в robots.txt? Или не прописывать?
И нужно ли регистрироваться в поисковой системе Яндекса? Гугл-то сам ищет, без robots.txt и sitemap.xml...