postPR.ru » Облако тегов » robots txt для яндекса

    Дешевый хостинг



 

Как настроить robot.txt на Блогспот?

Автор: SSZ | Дата: 1-10-2013 в 14:56 | Просмотров: 447 | Комментариев: 0



Как настроить robot.txt на Блогспот?
Раньше я не предавал значения настройки файла robot.txt. Хотя знал, что на блогспот она возможна. Читая посты на эту тему, я видил лишь пространные рассуждения и обилие терминов. И практически нигде не было хорошого примера, а точнее шаблона по которому можно настроить этот файл. Но полазив в интернете я наткнулся на довольно большую инструкцию по настройкие, в конце которой был довольно хороший шаблон. И решил сделать короткую версию, без лишний информации, чтобы не забивать голову. Вам только остается применить шаблон и за пару минут создать нормальный robot.txt на Блогспот. Более подробная информация в моем новом посте.

Категория: Блогосфера

 

Пример файла robots.txt для блога на движке WordPress

Автор: antop | Дата: 23-12-2011 в 02:09 | Просмотров: 788 | Комментариев: 0



Пример файла robots.txt для блога на движке WordPress
Когда Ваш блог WordPress впервые публикуется на всеобщее обозрение, и его сразу начинают сканировать поисковые роботы, то перво наперво они ищут файл robots.txt Каждому блоггеру важно разобраться с этим файлом, т.к. от него зависит корректность индексации Вашего сайта в выдаче.
В файле robots.txt мы явно можем сказать какие папки и файлы смотреть и какие исключать из индексации. Обычно со вторым пунктом (исключение из индексации) у блоггеров-новичков возникают вопросы. Да, исключать просто необходимо все технические файлы и папки, а также файлы и папки дублирующие контент на блоге.
Обо всем этом и о двух вариантах составления файла robots.txt для WordPress смотрите в моем новом посте...

Категория: SEO/SMO