Здравствуйте, уважаемые читатели! Сегодня я хочу рассмотреть крайне важную тему создания сайтов! Для правильной индексации сайтов необходимо составить файл Robots.txt. Чтобы поисковые роботы не индексировали все файлы, страницы вашего движка и не засоряли индекс. Robots.txt накладывает запрет индексации административных каталогов не несущих в себе информативной составляющей. Если этого не сделать то ваш ресурс может быть понижен в выдачи, что помешает дальнейшему продвижению! Желаю удачи!!!
