Google.com постоянно только Календарь индексирует.

[sercam]

На форуме в числе пользователей видно что делают и поисковые боты.

 

Так вот если Yandex.bot шарит весь форум, то вот у Google.com постоянно написано лишь одно - "Просмотр календаря". Всегда!!!

Интересно что за фигня? Он весь форум принципиально, зараза, индексировать не хочет?

[FatCat]

На форуме в числе пользователей видно что делают и поисковые боты.

 

Так вот если Yandex.bot шарит весь форум, то вот у Google.com постоянно написано лишь одно - "Просмотр календаря". Всегда!!!

Интересно что за фигня? Он весь форум принципиально, зараза, индексировать не хочет?

[GriMm]

зачем дублтровать первый пост фет кат?

[FatCat]

Сорри, глюкнулась авторизация, и набранное сообщение улетело в трубу, а удаленная цитата вылезла.

 

Фррум проспамлен хрумом; возможно поэтому гугла и выкинула все линки с showtopic из индексации за неуникальность.

[sercam]

Форум только месяц назад установлен.

Сразу как "гугл" начал там появляться только в календаре и сидит...

 

Думал сначала что из-за того что на главной странице типа "IPB Portal", но это всё равно бред, т.к. и на портале кроме календаря много чего есть....

[FatCat]

Форум только месяц назад установлен.

Упс!

Утром в Вашем профиле был линк на сайт и форум Бауманки, и форум там не месячный.

Сейчас в профиле вообще какая-то бредятина: два десятка топиков, и все закрыты от просмотра гостями. Ботам тоже запрещено топики смотреть? Дык они и не будут их индексировать.

[sercam]

Я так и понял и поэтому поправил ссылку.

------------------------------------------------------

 

М....

А почему же тогда "Yandex Bot" и "Rambler Bot" например шерстят все топики форума?

 

 

И как же сделать так чтобы боты индексировали, а все остальные смогли заходить на форум и читать только после регистрации.

Можно разрешить ботам сканить всё, но чтобы какой-нить умник не смог притвориться ботом и просматривать весь форум?

[FatCat]

И как же сделать так чтобы боты индексировали, а все остальные смогли заходить на форум и читать только после регистрации.

Сделать легко: присвоить ботам группу, отличную от гостевой, которой разрешен просмотр топиков.

Это хороший способ получить поисковый бан за клоакинг: отдачу разного контента поисковым ботам и реальным посетителям. Обычно клоаки больше 2-3 месяцев не живут.

[sercam]

Т.е. лучше так не делать, я правильно понял?

 

И всё равно не понимаю почему одни боты видят всё, а другие не видят.

[sercam]

Сегодня в первый раз за 3 недели сканирования "гуглом" форума, гугл вылез куда-то за пределы "календаря".

 

Google.com ( 66.249.71.144 ) Использование поиска

 

Интересно "Гугл" этим ограничится или всё же найдёт и всё остальное?

[sercam]

Открыл часть форума на чтение гостям.

Посмотрим что изменится....

[sercam]

Открыл 80% форума "Гостям".

Один чёрт "Гугл" в "Календаре" зависает. Я фигею...

[sercam]

Ну всё, всем спасибо, действительно помогло.

Теперь Гугл шарится по всему форуму.

 

Правда всё равно очень много времени зависает именно в Календаре, но тем не менее и шерстит весь форум.

 

Тему можно закрывать.

Всё дело было в правах гостя на чтение тем.