Боты Яндекса и Мейла

Очень стало интересно что значат те или иные боты, которые приходят на сайт каждый день. Один день такие, другой день другие, ходят что-то, по 100 раз просматривают различные страницы, при этом сайт еще не в индексе, ему всего 1 неделя от роду.

Вот, например, частые гости -
spider87.yandex.ru
mtbot2.yandex.ru
mtbot1.yandex.ru
zealot.yandex.ru
cback01a.yandex.ru
cback03a.yandex.ru
deathbolt.yandex.ru - слышала негативные отзывы, говорят сайт из индекса вылетает после его посещения (но у меня то об индексе речи вообще нет :o )
murza.mail.ru
awaken.yandex.ru
animate.yandex.ru
pray.yandex.ru

При этом если спайдер и мтбот ходит везде и вся, последние смотрят исключительно главную.

Не расскажете мне судьбу моего сайта

Цитата ("DashaSh"):

говорят сайт из индекса вылетает после его посещения

За блокирование яндексовских ботов можно вылететь гораздо быстрее...

Цитата ("elosoft"):

За блокирование яндексовских ботов

Это как понять? Что за блокирование?

Цитата ("DashaSh"):

Это как понять? Что за блокирование?

Ну не желательным ботам можно дать капитальный от ворот поворот или отправлять их ... куда-нибудь.

Ааа..да не, я так рисковать не буду, раз ходють, значит так надо

Цитата ("DashaSh"):

раз ходють, значит так надо

Тогда и "вылетать из индекса" они должны не просто так, а за дело.
Видать, и негатив за нехороший контент.