Приветствую Вас, дорогие читатели Sozdaiblog!
В данном посте я расскажу Вам, как создать robots.txt для WordPress!
Кто такой, robot.txt? – спросят некоторые.
Чтобы всем было понятно буду объяснять простым и понятным языком.
Robots.txt – это файл, обитающий в корневой папке Вашего блога и указывающий поисковым системам, какие данные вашего ресурса нужно сканировать, а какие оставить без внимания.
Тут у Вас опять возникнут вопросы – «Как же так, мы же установили плагин Google XML Sitemaps или карта для поисковиков и они знают, что индексировать?
Да, это так, но зачем им, например, индексировать наши каталоги или тысячи комментариев оставленных читателями. Для них это не целевая и бесполезная информация.
В данном посте я расскажу Вам, как создать robots.txt для WordPress!
Кто такой, robot.txt? – спросят некоторые.
Чтобы всем было понятно буду объяснять простым и понятным языком.
Robots.txt – это файл, обитающий в корневой папке Вашего блога и указывающий поисковым системам, какие данные вашего ресурса нужно сканировать, а какие оставить без внимания.
Тут у Вас опять возникнут вопросы – «Как же так, мы же установили плагин Google XML Sitemaps или карта для поисковиков и они знают, что индексировать?
Да, это так, но зачем им, например, индексировать наши каталоги или тысячи комментариев оставленных читателями. Для них это не целевая и бесполезная информация.
