postPR.ru » Облако тегов » Что такое robots.txt

    Дешевый хостинг



 

Что такое robots.txt и как его создать?

Автор: goldfish1991 | Дата: 2-11-2014 в 21:11 | Просмотров: 260 | Комментариев: 0



Что такое robots.txt и как его создать?
Robots.txt — текстовый файл, расположенный на сайте, который предназначен для роботов поисковых систем. В этом файле вебмастер может указать параметры индексирования своего сайта, как для всех роботов сразу, так и для каждой поисковой системы по отдельности.
Проще говоря, этот текстовый файл, который расположен на хостинге вашего сайта, является администратором для роботов поисковых систем. Он показывает роботам, какие страницы можно и нужно вносить в выдачу поисковых запросов, какие страницы содержат полезную информацию для ваших посетителей, а какие лучше закрыть от общего доступа.

Категория: Песочница

 

Что такое robots.txt и как его правильно создать?

Автор: serega906 | Дата: 22-12-2012 в 15:43 | Просмотров: 476 | Комментариев: 0



Что такое robots.txt и как его правильно создать?
Здравствуйте! Сегодня я расскажу об одном файле, который играет важную роль в продвижении вашего сайта. Речь пойдет о robots.txt.
Чтобы его установить вам необходимо открыть FTP-клиент и установить robots.txt(это займет буквально пару минут).

Для чего вообще нужен robots.txt?
В этом файле находятся инструкции для поисковиков, в которых описаны пути к файлам, страницам и каталогам, которые не нужно индексировать. Или же наоборот – в нем может быть указано расположение файла, который нужно проиндексировать в первую очередь.

А зачем закрывать страницы от индекса?

Категория: SEO/SMO