Last Modified и SEO эксперименты

Что такое Last-Modified?
Заголовок Last-Modified служит для информирования клиента, включая поисковых ботов о дате последнего изменения документа.
Как заголовок Last-Modified ускоряет и улучшает поисковую индексацию?
Очень просто. Как написано в помощи Яндекса, сам по себе поисковый робот не может определить изменилась ли страница с его последнего посещения или нет. Но, так как число страниц, получаемых роботом с сайта, ограничено, то робот будет индексировать все в подряд, переходя по ссылкам.
Следовательно важный, измененный контент может быть и вообще не проиндексирован.