Forum

Форум

Тема: Атаки от Google

20/02/2010 19:02 Bookkc:

Как отключить атаки от Google. Меня все время сканирует Google! Это уже надоело!

24/02/2010 22:17 DSMTS:

Поставь IP Google в запрещенный список, можешь добавить и другие поисковики. IP не один, может быть несколько. Смотри логи.
строка из конфига.
http_deny="74.125.87.104"

22/03/2010 13:53 Max:

Можно просто поставить ограничение на объем скачивания для IP адресов, исходя из объема вашего сайта, так чтобы роботы могли скачивать весь сайт не более одного-двух раз в сутки.

17/05/2010 06:55 Cerber:

Это не атаки, а индексация сайта. Робот Гугл работает быстро и может порядком нагрузить сервер запросами. Если не хотите, чтобы ваш сайт появился в этом поисковике - сделайте как сказано во-втором сообщении, но правильнее создать robots.txt в корне сайта и указать там запрет на индексацию. Тогда ни один нормальный робот (ни google, ни yandex, ни yahoo, ни msn) к вам не сунется.
Что касается объема, то поисковый робот в любом случае индексирует сайт не чаще раза в неделю (это если сайт сильно посещаем), о каких сутках может идти речь? У него и без этого сайта работы хватит! Слабенький yandex, например, индексирует мелкие сайты раз в пол-года, год. Да и то не всегда полностью.