Привет уважаемые читатели. Сегодня я вам расскажу какую роль играет правильно созданный файл robots.txt. Дело в том, что многие начинают вести свои проекты вовсе забывая про этот файл или не обращая на него никакого внимания. Спустя несколько месяцев, когда такой блог получает санкции со стороны Яндекса, все хватаются за голову и начинают искать в чем была проблема. Создать файл robots.txt это еще пол дела, а вот правильно его составить нужно еще уметь.