Летом проводил аудит сайта. Сайт был сделан на битриксе, но делали его какие-то мудаки не очень ответственные люди. Дело в том, что все адреса страниц генерировались через всякие непонятные конструкции типа www.mysite.ru/?432&PRINT=321&ID=3882. Из-за этого формировалась невероятная куча дубликатов.