Баним левых ботов

Started by Dr_Brown on 2014-03-02 15:20 — 7 replies, 2037 views

#1
Открыть .htaccess в корне сайта, добавить:

SetEnvIf User-Agent MJ12bot MustDie=1
SetEnvIf User-Agent Twiceler MustDie=1
SetEnvIf User-Agent Baiduspider MustDie=1
SetEnvIf User-Agent Slurp MustDie=1
SetEnvIf User-Agent Java MustDie=1
SetEnvIf User-Agent CommentReader MustDie=1
SetEnvIf User-Agent Dolphin MustDie=1
SetEnvIf User-Agent Yeti MustDie=1
SetEnvIf User-Agent discobot MustDie=1
SetEnvIf User-Agent BTWebClient MustDie=1
SetEnvIf User-Agent Tagoobot MustDie=1
SetEnvIf User-Agent Ezooms MustDie=1
SetEnvIf User-Agent igdeSpyder MustDie=1
SetEnvIf User-Agent AhrefsBot MustDie=1
Order allow,deny
Allow from all
Deny from env=MustDie
#2
Чушь полная. Чем Baidu не угодил? Да и понты с "mustdie" лишь понты.
#3
Exile, нагрузка на проц VDS: - 10 %
#4
Когда на форуме 10 человек онлайн загрузка на VDS зашкаливает и он плавится?
#5
Exile, даже когда 0 человек, проц плясал от 15 до 30 %, по синусоиде, и baidu логи просто засирал.
#6
Яндекс и Google по такой логике тоже банить надо. Надо сервер корректно настраивать, а не блокировать поисковых ботов.
#7
Exile, никто поисковых не банит.....можна подумать что у всех прям индексация в baidu жесть....во всяком случае боты яши и гоши не грузят сервак.
#8
Exile, я вот и пытался намекнуть в соседнем топике что надо апачь убить и все будет пахать =)