postPR.ru » Облако тегов » robots txt для сайта

    Дешевый хостинг



 

Готовый файл ROBOTS TXT. Cоздание XML карты сайта

Автор: gushban | Дата: 21-01-2012 в 01:41 | Просмотров: 1290 | Комментариев: 0



Готовый файл ROBOTS TXT. Cоздание XML карты сайта
Привет всем блоггерам!

Если вы совсем недавно создали свой сайт или блог, то эта статья для вас будет очень даже полезной! Дело в том, что молодые сайты очень плохо и долго индексируются поисковыми системами (Google, Yandex). Для того, чтобы ускорить данный процесс, в первую очередь вам необходимо создать на своем сайте две карты сайта (визуальную - доступную для просмотра посетителям; скрытую - для самих поисковиков). А также составить правильно файл ROBOTS TXT. Обо всем этом, вы узнаете в данной статье!

Категория: Создание и разработка

 

Пример файла robots.txt для блога на движке WordPress

Автор: antop | Дата: 23-12-2011 в 02:09 | Просмотров: 786 | Комментариев: 0



Пример файла robots.txt для блога на движке WordPress
Когда Ваш блог WordPress впервые публикуется на всеобщее обозрение, и его сразу начинают сканировать поисковые роботы, то перво наперво они ищут файл robots.txt Каждому блоггеру важно разобраться с этим файлом, т.к. от него зависит корректность индексации Вашего сайта в выдаче.
В файле robots.txt мы явно можем сказать какие папки и файлы смотреть и какие исключать из индексации. Обычно со вторым пунктом (исключение из индексации) у блоггеров-новичков возникают вопросы. Да, исключать просто необходимо все технические файлы и папки, а также файлы и папки дублирующие контент на блоге.
Обо всем этом и о двух вариантах составления файла robots.txt для WordPress смотрите в моем новом посте...

Категория: SEO/SMO