Nginx-ru mailing list archive (nginx-ru@sysoev.ru)
[Date Prev][Date Next][Thread Prev][Thread Next][Date Index][Thread Index]
Re: запретить всех кроме ботов яндекса
return 503 сделайте, это нестрашно, вы не выпадете из поисковой выдачи.
Яндекс любит приходить не только с User-Agent, по которому видно бота,
но и с "обычным пользовательским", если он видит, что вы
подстраиваетесь под поисковых ботов, в этом случае вы можете потерять
позиции в поисковой выдаче. Мы однажды неаккуратно заблокировали
ботнет, и Яндекс нас ненадолго стал любить меньше, чем раньше. Потом
все вернулось.
22 октября 2013 г., 16:33 пользователь ulrith <nginx-forum@xxxxxxxx> написал:
> Всем привет!
>
> Помогите новичку--у нас на сайт идёт DDOS-атака. Чтобы не ложился сервер,
> пришлось отключить сайт директивой deny all;
>
> Теперь надо сделать так чтобы боты Яндекса смоли считать с сайта robots.txt
> и узнать о новом домене. Гуглил и яндексил и пока не смог понять как это
> сделать.
>
> То есть как я понимаю перед директивой deny all; мне нужно поставить некую
> allow, которая разрешит подключение со строкой User-agent в которой есть
> вхождение "Yandex". В иделе, разрешит только для файла /robots.txt...
>
> Posted at Nginx Forum:
> http://forum.nginx.org/read.php?21,243975,243975#msg-243975
>
> _______________________________________________
> nginx-ru mailing list
> nginx-ru@xxxxxxxxx
> http://mailman.nginx.org/mailman/listinfo/nginx-ru
_______________________________________________
nginx-ru mailing list
nginx-ru@xxxxxxxxx
http://mailman.nginx.org/mailman/listinfo/nginx-ru
|
