Почему Яндекс не индексирует сайт?

Эти вопросы заполоняют все больше сайтов, блогов и форумов и можно найти множество вопросов и ответов, теорий и экспериментов.
Действительно если сравнить, то Яндекс намного медленнее берет в индекс как новые сайты, так и некоторые уже с возрастом, чем Гугл.

Хочу поделиться с Вами своим опытом борьбы с Яндексом за право быть проиндексированным. За этот период, а это ни много ни мало почти 5 месяцев (да-да, я оказался у Яндекса "любимчиком"), я был много раз полностью выброшен из поиска, получал ошибочные фильтры АГС и так далее.
Очень надеюсь, что мой опыт будет полезен вам и поможет решить ваши насущные проблемы.