Добавление новых поисковых ботов

[M@K]

А может кто-нибудь в двух словах объяснить их принцип работы? Когда они автивизируются?

[Fastserg]

Они не авторизуются

Их форум авторизует по USer_agent

[M@K]

А поподробней можно? или ссылочку на доку где почитать мона?

[IBResource]

А поподробней можно? или ссылочку на доку где почитать мона?

M@K

http://www.searchengines.ru/forum/

[Fastserg]

M@K

А что тебя конкретно интересует? Доку по чем?

[Остап]

И всё таки Yahoo никак поймать не могу ... Оска, что у вас на этом форуме стоит ? Постоянно яху сидит ... Я у себя в логах IIS вижу, что был, а в форуме нет Пробовал и yahoo и Yahoo и даже Yahoo! не помогло ...

[Fastserg]

Остап

Я с ним тоже чуть-чуть попарился..., но справился. Проблема была в:

 'yahoo'   =>  'Yahoo',            

В functions.php

 

И тут тоже должен быть именно yahoo

 
 if ( preg_match( '/(googlebot|slurp@inktomi|ask jeeves|lycos|whatuseek|ia_archiver|aport|yandex|st  ackrambler|scooter|yahoo|Gigabot|zyborg@looksmart|  WebCrawler|Openbot|libwww)/i', $HTTP_SERVER_VARS['HTTP_USER_AGENT'], $match ) )

[Остап]

Fastserg

В том то и дело, что пробовал ... Не увидел я его в логах почему то ...

[latitude]

Яндекс бот , в конфах и в фанкшин.пхп есть, но я его никогда не видел в списке активных и в логах ...

В чем может быть проблема ? Не индексирует меня вообще ?

[amazed]

Только не пинайте ногами ... Для чего нужны боты - их главные функции ? Я только вчера впервые установил борду (пока что на локалхосте) и хочу по-быстрее обо всём узнать .

[Fastserg]

latitude

Попробуй http://www.yandex.ru/cgi-bin/urlstat?url=

После = вводишь адрес своего форума.

А затем смотришь на своем форуме. ДОлжен прийти yandex для анализа ввденного урла.

[Остап]

amazed

Они индексируют то, что творится у тебя на форуме, что бы люди по поиску с яндекса, рамблера и тд и ключевым словам могли нахожить нужную им инфу. В твоих интересах, чтоб тебя находили. Другой вопрос, что тема не об этом. Они и так тебя индексируют. Тема о том, что бы ты видел, как это происходит, те в логи форума записывались действия тех или иных поисковиков ...

[amazed]

Остап

 

Спасибо за хорошее обьяснение . Я сначала так и думал, но хотел лишний раз убедиться .

[X-ZERO]

Ко мне "GoogleBot" зашол 7 раз,после чего в админке когда я смотрю логи в строке

"Query String" пусто,как я понимаю это значит,что бот не чего не проиндексировал...

Мож я что-то не так ставлю?Почему бот страницы не индексирует?

[M@K]

2Fastserg да вот не пойму что-то, вроде всё прописал как и должно быть, а вот в логах нету записей о том что боты заходят!!!

[Fastserg]

Трудно сказать... Так как я не знаю что ты и где делал?

 

Попробуй это Добавление новых поисковых ботов

Если не будет yandex в онлайне - значит что-то не так сделал.

[Dekker]

поставил таки этого мода, решился, добавил MSNBot, посмотрим ... от меня он тоже не вылазит.

[X-ZERO]

Попробуй http://www.yandex.ru/cgi-bin/urlstat?url=

Зашол я тоже сюды и вот что мне пишится:

Отклик сервера менее 2 сек.

Дата документа ВНИМАНИЕ! Сервер не выдает дату последнего изменения документа!

Кодировка документа WINDOWS-1251

Документ :

1. http://www.emufan.net/ Emulators

Размер документа 25.8 Kb

И бот ко мне не зашол...что делать?

[Fastserg]

X-ZERO

Похоже, что тебя версия форума 1.1.х

Там нет встроенной функции лога поисковых ботов и соответсвенно эта модификация тебе не подходит.

[Остап]

X-ZERO Глянь эту тему : Search Engines Log / Система Ведения Логов Поисковых Ботов /

[Dekker]

для версии 1.1.1 вначале необходимо ставить мод, а только потом добавлять ботов, все правильно люди говорят.

 

Дата документа ВНИМАНИЕ! Сервер не выдает дату последнего изменения документа!

header ("Last-Modified: ".$sdate);
header ("Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0");
header ("Pragma: no-cache");

добавь в index.php

[Dekker]

Рамблер почему то не отображаеться, лог не ведеться, на самом деле посещает, может имя у бота сменилось ?

'stackrambler'    => 'Rambler'

if ( preg_match( '/(googlebot|msnbot|aspider|inktomi slurp|ask jeeves|lycos|whatuseek|ia_archiver|aport|yandex|stackrambler)/i', $HTTP_SERVER_VARS['HTTP_USER_AGENT'], $match )

Добавлено в [mergetime]1087030988[/mergetime]

ЗЫ пробел в коде только здесь почему то ... в файле все нормально ....

[Остап]

ЗЫ пробел в коде только здесь почему то ... в файле все нормально

у меня без - всё определяется

[Oxyakas]

QUOTE

Попробуй http://www.yandex.ru/cgi-bin/urlstat?url=

 

 

Зашол я тоже сюды и вот что мне пишится:

Отклик сервера менее 2 сек.

Дата документа ВНИМАНИЕ! Сервер не выдает дату последнего изменения документа!

Кодировка документа WINDOWS-1251

Документ :

1. http://www.emufan.net/ Emulators

Размер документа 25.8 Kb

И бот ко мне не зашол...что делать? 

та же тема (((

 

X-ZERO

Похоже, что тебя версия форума 1.1.х

Там нет встроенной функции лога поисковых ботов и соответсвенно эта модификация тебе не подходит.

Powered by Invision Power Board(U) v1.3 Final © 2003 IPS, Inc.

Русский Модифицированный IPB v1.3 Final © 2003 BesTFileZ.Net & IBR Team

 

 

 

URL http://forum.dakolbass.ee/ глазами Яndex.Ru

 

Отклик сервера  менее 1 сек.

Дата документа    ВНИМАНИЕ! Сервер не выдает дату последнего изменения документа!

Кодировка документа  ВНИМАНИЕ! Сервер не выдает кодировку документа!

Документ :

1. http://forum.dakolbass.ee/   DakolBass.ee

     Размер документа 67.8 Kb

 

и что жделать?? )))

 

 

 

 

 

 

 

и еще спросить хотел это кто такие?? Archive.org и Ask Jeevesмож кто знает кто это такие и откуда приходят??

[X-ZERO]

для версии 1.1.1 вначале необходимо ставить мод, а только потом добавлять ботов, все правильно люди говорят.

 

 

QUOTE

Дата документа ВНИМАНИЕ! Сервер не выдает дату последнего изменения документа!

 

 

 

CODE

header ("Last-Modified: ".$sdate);

header ("Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0");

header ("Pragma: no-cache");

 

 

добавь в index.php

 

Dekker куда именно вставлять строчку -

header ("Last-Modified: ".$sdate);

header ("Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0");

header ("Pragma: no-cache");

в index.php?После какой строчки мне это вставлять?