Блокируем бота Ahrefs.com - сборщика беков

ahrefs bot

Бывает постает задача скрыть беки ссылающихся сайтов от конкурентов (конечно, самый хитрожопый способ это 301 редирект с другого ресурса), ну, или уменьшить нагрузку на сервер %). Раньше беки в основном смотрели через siteexplorer.yahoo.com, но блокировка бота яху не очень хорошая идея. Теперь на первый план вышли альтернативные сервисы сборщиков беков. Одним из самых популярных является Ahrefs.com. Боты Ahrefs размещяются на серверах укртелекома и скорее всего создатели также проживают там-же.

Сеть ип-адресов на данный момент не большая, и чтобы заблокировать её достаточно внести в .htaccess блокировку ип диапазона 213.186.127.1-14.

order allow,deny
deny from 213.186.127.0/28
allow from all

Теперь Ваши беки могут спать спокойно.

Google Bookmarks Technorati Slashdot Yahoo My Web News2.ru БобрДобр.ru RUmarkz Memori.ru rucity.com МоёМесто.ru Mister Wong

Опубликовано 16.01.2012в 22:35. В рубриках: Белый СЕО, Черный Сео. Вы можете следить за ответами к этой записи через RSS 2.0. Вы можете оставить свой отзыв или трекбек со своего сайта.

Оставьте свой комментарий