Не большое наблюдение за пауками...
Интересную тенденцию наблюдаю я у себя на форуме! (v3.0.7)
Когда я поставил форум и настраивал, то сразу подумал о индексации его в поисковиках, поэтому тщательно и точно продумал мета теги, чтобы соответствовали тематике форума, потом полазил почитал как правильно в настройка прописать ботов, и где то прочел, что к некоторым, на форум поисковики не заходят, и что где то надо втыкать какую то строчку, помимо настроек в админке...честно говоря где читал, и что надо "втыкать" сейчас уже не помню! (ни каких дополнительных строчек я не вписывал)
Короче прописал Я всё и стал ждать пауков....
Так прошел месяц......:o
Ни кто кроме юзеров ко мне так и не пришел.... Ещё раз побродив вместо паука по форуму, я полез в админку, проверил прописку ботов, имена и индефикаторы, очередность...и стало мне грустно..правильно писали..просто так хрен кто приходит..
И вот дней так через 40...в гости пожаловал Яндекс, покрутился на главной странице и свалил через 5 минут
Осталось только думать, придет ещё раз
Приходил, довольно часто, но других как не было так и нет.... Шло время...форум потихоньку обрастал сообщениями и новыми разделами... Яндекс уже не удивлял своими визитами..как вдруг тук-тук-тук............ Рамблер подвалил...
Стали они с Янд. на пару частыми гостями!!!
Форум все расширялся... И сладкая парочка, строго в ночное время!!! постоянно капашилась в моем "богатстве"
Не знаю их ли это рук дело, но подтянулся Апорт, как в сказке теремок...ему не отказали, живи и ты!!! Последним к стае прибился Гугл...заходил по началу редко, сидел правда по долгу, часов по 5-6!!!!
Сейчас, когда на форуме около 7 тыс тем, эти четыре паука, практически не уходят круглые сутки.... Увидеть всех четверых одновременно, уже не редкость..... мало того, Яндекс приходит в двух лицах (под двумя IP одновременно

)
НО!
У меня то прописано 5 пауков, вот почему Яху не приходит, для меня пока что загадка!!! Так или иначе, результатом я даволен! По нужным мне запросам, форум день отодня отдается в посковиках всё лучше! Вот такая история.......