Боты поисковых систем и их нагрузка на сервер
 

В этой теме хочу обсудить боты поисковых систем и их нагрузку на сервер.

Начну с Яху:
Слышал много раз, что например бот яху(не путать с яшей) при индексе сайтов грузит сервер, нагрузка хоть и не такая значительная, но мне кажется трафика от яху никакого, но в отличии от гугля и яши, он часто сидит на форумах(замечал на своих).

Думаю лучше яху банить через .htacess

Ваши мнения?

Во-первых, не .htacess, а .htaccess
Во-вторых, если ваш сайт падает от нагрузки поисковых ботов, то реальных посетителей он не потянет с достаточно большой вероятностью и имеет смысл задуматься об оптимизации скриптов и/или смене хостинга.

писал на память название файла....смысл все равно понятен
я тему создал не про хостинг, а про ботов, не будем другое обсуждать в теме, ок?

У кого то есть трафик с яху? если нет и не придвидеться, то в принципе можно и забанить. Но а друг появиться трафик позже?

Банить поискового бота??? Может сразу професию сменить или повесится? Тогда дайте бан закомпанию и Мете, и Рамблеру, и Енигме, Альте Висте, что вас останавливает?

Нагрузку производят все роботы одинаково!