Nginx-ru mailing list archive (nginx-ru@sysoev.ru)
[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]
Re: Помогите разобраться от куда берутся левые get-зап росы
25.11.2011 02:26, valet пишет:
Я сделал проще, я тупо убрал
кеширование.
Не поможет, раз боты уже "нашли" эти страницы - то будут их переодически
проверять. Я когда менял на одном из своих проектов структуру
ссылок(большой кусок статики переехал на другой набор ссылок) - то даже
через 3 месяца видел запросы по старым ссылком от гуглового бота и это
при том, что там отвечали 404, а если ботам отвечать на такие страницы
200 - то они просто обязаны за ними приходить вновь и вновь.
--
Богун Дмитрий aka vugluskr
_______________________________________________
nginx-ru mailing list
nginx-ru@xxxxxxxxx
http://mailman.nginx.org/mailman/listinfo/nginx-ru
|