Как создать файл robots.txt по методу Борисыча

Во многих заметках своего личного блога я уже много раз писал, что я не сторонник сложных методов и действий по созданию блога. Мне хочется, чтобы работа на сайтах, да и вообще, чтобы любые возможности и действия для пользователей интернета были понятными, простыми, легкими и быстрыми по исполнению. Поэтому все, о чем я рассказываю и чего я хочу создать на своем блоге, я хочу и я пытаюсь это делать без упоминания технически сложных для большинства пользователей интернета понятий, типа: файл, код, корень сайта и т.п. И не смотря на то, что сегодняшняя моя запись посвящена тому, как создать файл robots.txt, я постараюсь писать о нем также простым и понятным русским языком.
Читать далее...