Русские поисковики и их боты.

[wasp]

Здрасте всем .Полазил по поиску немного хочется уточнить насчет поисковых ботов.

Короче суть дела такая -поставил недавно форум,проиндаксировал его в русских поисковиках(версия форума 2.0.3)

Теперь захожу в Search Engine Spider Logs,

и вижу что по страницам пролазил только один гуглевский бот.Заходов что-то около 2000.Но при проверке некоторых ip, через функцию средства ip, вижу что у меня и MSN и яндексовский боты бывают,я так понимаю они просто под именем Google у меня прописанны ,поэтому в списке логов их нету?

Теперь вопрос конечно ламерский но тем не мение скажите -эти логи удалять или пусть остаються?

Потом как можно узнать индаксирует ли мой форум яндекс или нет?

Или просто надо дать каждому боту свое имя и тогда все станет проще?

И наконец последние ,например я копирую что нибудь со страницы своего форума,вставляю в поисковую систему скажем яндекса и по этому запросу он мой форум не находит,хотя и фраза точно совпадает с текстом на моем форуме.Может такое быть?

Спасибо.

[Beavis]

Единственное что могу сказать, вот мой список ботов:

GoogleBot=Google

slurp@inktomi=HotBot

Ask Jeeves=Ask Jeeves

Lycos=Lycos

WhatUSeek=What You Seek

ia_archiver=IA.Archiver

is_archiver=IA.Archiver

Yandex=Yandex

Yahoo!=Yahoo!

Yahoo-MMCrawler=Yahoo! MMCrawler

TurtleScanner=TurtleScanner

TurnitinBot=TurnitinBot

ZipppBot=ZipppBot

StackRambler=StackRambler

[fc4]=fc4

oBot=oBot

rambler=Rambler

zyborg@looksmart=WiseNut

Jetbot=JetBot

NaverBot=NaverBot

libwww=Punto

aport=Aport

msnbot=MSN

MnoGoSearch=mnoGoSearch

booch=booch_Bot

Openbot=Openfind

Gigabot=Gigablast

scooter=Altavista

WebCrawler=Fast

WebZIP=WebZIP

GetSmart=GetSmart

grub-client=GrubClient

Vampire=Net_Vampire

[wasp]

Ну это понятно,просто хочется знать если у меня все эти боты под именем Google,то можно их и не писать.Вопрос так ли это или нет.

Как это узнать?

[Mitos]

Добавление новых поисковых ботов