Зачем годами долбиться в “404 Not Found”?!
Уже 2.5 года прошло с тех пор, как я удалил с одного своего сайта целый раздел, соответственно все адреса вида сайт.ру/удаленный_раздел/*.хтмл перестали существовать и исправно с первого же дня начали отдавать стандартный в таких случаях серверный заголовок “HTTP 404 Not Found”.
Шли дни, недели, месяцы и годы, а боты Гугла все продолжали практически каждый день посещать удаленные страницы, каждый раз получая “HTTP 404 Not Found”. И по сей день продолжают это странное дело. Читать далее…