1 Topic by client

Topic: Перечень ботов поисковых систем

Здравствуйте, Вы делились скрином что здесь на форуме у Вас много ботов поисковых систем.
У меня же в админке прописан только для Google, Вы могли бы поделиться своим списком?

Заранее спасибо.

2 Reply by PunBB

Re: Перечень ботов поисковых систем

Существует большое множество ботов, но приведу те что у нас в админке

AdsBot-Google
AhrefsBot
Aport
Baiduspider
BegunAdvertising
bingbot
coccoc
Exabot
FAST
Googlebot
Googlebot-Image
Googlebot-Mobile
GrapeshotCrawler
LinkpadBot
lycos
Mail.RU_Bot
MegaIndex.ru
MJ12bot
MSNBOT
MSN
rambler
scooter
Slurp
SputnikBot
StackRambler
tbot-nutch
WebAlta
Yahoo
YandexBot
YandexMetrika
YandexMobileBot

Каждый с новой строки. Добавлять в расширение Pan Statistic

1

3 Reply by client

Re: Перечень ботов поисковых систем

Спасибо, improved online list надо было указывать еще их IP адрес...поэтому и спросил)
Но по такому случаю установил Pan Statistic