Добавление новых поисковых ботов

[GiV]

Кроме того, все же неясен момент с сессиями (в 1.3). Так видят их распознаваемые боты или нет? Вроде, судя по коду, не должны

в 1.3. сессии убраны из урла. Если вы конечно это имеете ввиду. Однако боты "пугаются" не сессии, а значков ? и &. Хотя это уже не проблема, боты российских поисковиков уже как год научились индексировать динамику.

(Использовать конвертер не хочу по ряду субъективных причин)

есть lo-fi версия для 1.3, основной форум не затрагивает, а для поисковиков самое то. Поиск по слову: "lo-fi"

[toha]

с 1.3 все ясно

но как же добавить ботов в 2.0.х? просто дописать в админку? вида psbot=PSbot?

и никуда ничего добавлять не нужно?

[saman]

Все правильно понял

[helenk84]

у меня такая проблема.

1. приходит бот мсн ( msnbot.msn.com ), но форум его не распознаёт, хотя все изменения, как указано выше я сделала. не распознаёт = показывает как гостя простого.

2. приходит бот inktomi ( inktomisearch.com ), насколько понимаю это Hot bot. он у меня за гостя не считается, но и не отображается вообще внизу главной страницы. только в 'Last click' и там просто айпи его и всё.

 

как сделать чтобы оба они отображались нормально?

[Stalingrad45]

Вот что странно. Небезъизвестный Archive.org (Инет-архив), он же Alexa напрочь не сохраняет в своем архиве форум. Знаю еще один форум 2.0.1. который после перехода с 1.3 точно также прекратил там архивироваться. Бот лазит и приходит сразу же после запроса - и....фиг два. Жаль.

[kolorom]

Внимание! Сервер не выдает дату документа, поэтому в результатах поиска дата для него показываться не будет.

 

Строки:

 

header ("Last-Modified: ".$sdate);

header ("Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0");

header ("Pragma: no-cache");

 

в index.php добавлял! версия форума 1.3 финал (игорёк)

 

Пс а как поисковик meta.ua и bigmir.net добавить?

[kepler]

у меня такая проблема.

2. приходит бот inktomi ( inktomisearch.com ), насколько понимаю это Hot bot. он у меня за гостя не считается, но и не отображается вообще внизу главной страницы. только в 'Last click' и там просто айпи его и всё.

как сделать чтобы  они отображались нормально?

<{POST_SNAPBACK}>

 

Аналогичная проблема версия форума v1.3 Final

[kolorom]

lj2082.inktomisearch.com

 

 

Таже беда!

[omutru]

BIG List of User-Agents (Spiders, Robots, Crawler, Browser)

[kolorom]

Тоже интересует мейл.ру !

[PALADIN+]

Кста тоже интересно насчёт мейла.

 

 

Вопрос такой - когда регистрируешься в системах поисковиков, просят ввести стартовую страницу.

 

У меня форум находится по адресу:

Хттп://Главная страница/forum

 

И я бы хотел чтобы в первую очередь индексировался именно он.

Причём чем больше индексировался тем лучше.

Как бы это обеспечить?

 

А то боты сами как-то вяло заходят..

[Super Gonzo]

А можно ли прописать бот, если мне не известен его юзер-агент, но известен айпишник?

Есть такая украинская поисковая система meta. Бота зовут METASpider. Видел его у себя всего пару раз, зато частенько у меня бывает на сайте другой их бот, который, видимо, отслеживает работу их информера (у меня инклюжен их дайджест последних новостей). То, что это бот - 100%. Айпишник один, счетчиками не учитывается, в whois прозывается meta.ua.

Как бы его прописать?

[saman]

Super Gonzo

В логах сервера поройся, поищи по этому IP и посмотри юзер-агента, если найдешь...

[arigoda]

Тоже интересует мейл.ру !

<{POST_SNAPBACK}>

насколько мне известно, нет у mail.ru поисковой системы - они же всегда юзали гугл

впрочем, кто знает - может за последний год что-то кардинально изменилось.

но что-то сомневаюсь

[pikachu]

для 2.0.х версий будет что-нибудь подобное?

[arigoda]

а в версии 2.x все проще - управление ботами вынесено в админку - берете здесь юзер-агента, вставляете там и указываете имя.

[pikachu]

arigoda: точно...незаметил

спасибо за наводку

[MAXX_13]

Почему MSN бот может не отражатся в списке он-лайн? Все остальные отражаются он нет, вместо него одна запятайка?

 

Вот это у меня в functions.php

 

'yahoo' => 'Yahoo',

'Gigabot' => 'Gigablast',

'zyborg@looksmart' => 'WiseNut',

'WebCrawler' => 'Fast',

'Openbot' => 'Openfind',

'libwww' => 'Punto',

'msnbot' => 'MSN',

'MnoGoSearch' => 'mnoGoSearch',

'booch' => 'booch_Bot',

'WebZIP' => 'WebZIP',

'GetSmart' => 'GetSmart',

 

Где может быть ошибка ошибка?

[MAXX_13]

Разабрался сам, если у кого будет такая же проблема обезательно пропишите имя бота в conf_global.php

 

$INFO['sp_MSN'] = 'MSN';

 

раньше было так -

 

$INFO['sp_MSN'] = '';

 

Поэтому и не показывался.

[PALADIN+]

как добавить в список бота от webalta.ru ?

[sudmed]

Webalta=Webalta

[dimitry]

Обнаружил что-то вроде уязвимости

по поводу бота Spider Alexa - этот бот используется популярным аплоадером файлов megaupload.com

Такое происходит после установки мода Search Bot Recognition 1.1 ©2003-2006 by Peter

и Если Вы используете браузер Опера и Вы пытаясь скачать

в конфигурационный файл OperaDef6.ini добавляли следующие строчки (в самый конец файла):

[ISP]
Id=SV1; Alexa Toolbar

Это используется пользователями, чтобы обойти т.н. "отсутствие" свободных слотов для скачивания файлов

Если Вы являетесь админом движка Invision Power Board 1.3, то бот Spider Alexa проникает в настройки Вашей админки и не дает Вам залогинится на самом форуме, но в админку Вы сможете зайти, причем Вы внизу в списке участников отображаетесь как залогиненный вместе (!!!!) с ботом Spider Alexa (!!!!!), хотя по всем функциям Вы распознаетесь движком как незалогиненный (!!!)

Причем не сможет залогиниться на самом форуме ни один участник! Только что проверил.

Поэтому в админке удалил этот бот.И только после этого смог залогиниться на главной странице форума.

Изменено 7 Января 2007 пользователем dimitry

[Song]

Spider Alexa проникает в настройки Вашей админки

чего прям так и проникает?

[dimitry]

Spider Alexa проникает в настройки Вашей админки

чего прям так и проникает?

Нет, ну я на полном серьезе говорю, так и было все, попробуйте добавить изменения в OperaDef6.ini и установить мод Search Bot Recognition 1.1 ©2003-2006 by Peter и сразу же получите то, о чем я говорил...

[gtasa]

А нам это надо ?