Проблемы с Яндексом

[Lera]

Проблемы с Яндексом, на старом хосте не вылезал с форума, а на новый переехали, не хочет индексировать. В папку форума залила пустой файл robots.txt чтобы дать возможность индексации без ограничения, лишь бы начал кушать это Яша, не помогает. Скормлю ссылку, приходит, посидит в ней и уходит. Ночью проверила, индексирует только дневники и календарь, форум не хочет, в то время как Гугл прописался и ноги развалил повсюду.

У меня гости не могут зайти в темы, так же было и на старом форуме, проблем не было. На этом пытаюсь уже ботов прописать в группу, кто может ходить по темам, но они цвет этой группы не принимают. Они вообще отличаются от групп форума, хотя стоит для них группа. Подскажите, что делать. Поиском искала, форум читала, уж поверьте. Свою ситуацию не нашла. То ли они у меня и в группы не попадают, а на старом ставила группу и работало, то ли ещё что-то. Спасибо за любой ответ.

 

Сайт с августа стоит, Яндекс с августа прикармливаю.

Все пасутся, кроме него.

Изменено 12 Ноября 2007 пользователем Lera

[Wolf Messing]

Советую подождать-робот не приходит сразу

[Lera]

В саппорт их писала, говорят помогут уже третий месяц, нет надежды, а у меня большинство пользователей с яндекса заплывают.

 

Знаю, что не приходит сразу, но у меня сайт уже 4 месяца стоит, и 4 месяца я Яндекс заманиваю.

Изменено 12 Ноября 2007 пользователем Lera

[Wolf Messing]

Кстати роботс не должен быть пустым

[FatCat]

То ли они у меня и в группы не попадают

Раз ГуглБот "ноги развесил" - значит боты в группу попадают.

Остается проверить, определяется ли ЯндексБот.

При желании можно попробовать подделать юзерагент браузера (не помню, кто-то из браузеров позволял вписать юзерагента с руки).

 

 

то ли ещё что-то.

Подозреваю, что может сильно влиять айпишник хостера.

На рабочем форуме пока хостились на РБК, ЯндексБот лазил постоянно, но неторопливо. Как переехали на ОРЦ, бот стал редким гостем, но зато как придет раз в месяц, так сразу 8-10 тысяч страниц за несколько часов; спасибо, движок 1.3 экономный, провайдер не ругается.

 

 

Спасибо за любой ответ.

У меня приток ботов возник после выкладывания в форуме статистики поисковых запросов, приведший к нам на форум.

Вот этот топик, собственно: http://www.pharm-forum.ru/index.php?showtopic=2797 - после публикации второго сообщения боты пошли.

Думаю сделать себе такой сброс статистики в форум регулярным.

[Lera]

FatCat спасибо.

 

Насчёт групп, если им меняешь группу, боты не обретают её цвет, это нормально?

[xRay]

FatCat

За такой сброс статистики и в бан не долго улететь

 

Lera

Ты линк на новый домен в Яндекс внесла?

У Яндекс поддрежка забита так что осбо не надейся что они помогут.

[Lera]

Кстати роботс не должен быть пустым

Да, я знаю, но мне так посоветовали, вот я и сделала.

Поискала на форуме такой файлик не нашла, а у меня его вообще не было. Кто-то тут из модераторов писал, что он находится в дистрибьютиве форума, но нет его там, и не было, сегодня специально скачала новый дистрибьютив, нет там такого файла.

Я прописала то, что нашла тут на форуме, затем сделала пустым, боясь, что вообще Яндекс заартачится.

 

xRay - конечно внесла, и иногда притягиваю бота за уши, кидаю в урл ссылку не на главную, а регистрирую ссылку на тему. Сразу приходит, а потом опять тишина.

 

Зато в дневниках пасётся и в календаре, сам форум ему не нравится чего-то.

[Song]

Lera вам первым делом надо в Яндекс обращаться, а не сюда на форум.

[Lera]

Спасибо, Сонг, обращалась, я просто подумала, что может быть у меня на форуме что-то не так. Неправильный файл или, как мне сказали, запрет индексации случайно поставлен. Я три месяца решаю этот вопрос, только через 3 месяца открыла тему тут, решив, что может быть что-то в форуме.

[Song]

Просто мы можем только предположить, а точно сказать - только сам Платон Щукин.

[sudmed]

У меня приток ботов возник после выкладывания в форуме статистики поисковых запросов, приведший к нам на форум.

Вот этот топик, собственно: http://www.pharm-forum.ru/index.php?showtopic=2797 - после публикации второго сообщения боты пошли.

Думаю сделать себе такой сброс статистики в форум регулярным.

Закрывай индексирование этой страницы в robots.txt, пока яндексоиды не пессимизировали сайт за ссылочный спам.

Изменено 13 Ноября 2007 пользователем sudmed

[xRay]

Поздно зкрывать индексирование она (страница) уже в кеше (поисковиков) есть. Нужно просто на будуще о таких вещах помнить.

 

Lera

Если в Дневниках посется а на форуме нет, то значит проверяй доступ для группу в котрую поисковики занесены. (на пример того могут ли участники этой группы содержимое тем видеть и т.д.)

[sudmed]

Поздно зкрывать индексирование она (страница) уже в кеше (поисковиков) есть.

Она еще яшей не проиндексирована.

[xRay]

А я не только и не сколько про яшку а про это например:

_http://64.233.183.104/search?q=cache:ZQ6qoxP3KlUJ:www.pharm-forum.ru/index.php%3Fshowtopic%3D2797%26view%3Dgetlastpost+%22%D0%9D%D0%B0%D1%88%D0%B8+%D0%BF%D0%BE%D1%81%D0%B5%D1%82%D0%B8%D1%82%D0%B5%D0%BB%D0%B8+%D0%B8%D0%B7+%D0%BF%D0%BE%D0%B8%D1%81%D0%BA%D0%BE%D0%B2%D0%BE%D0%BA%22&hl=ru&ct=clnk&cd=1&gl=ru&ie=UTF-8&inlang=ru

[FatCat]

FatCat

За такой сброс статистики и в бан не долго улететь

Да брось ты.

Порнорассыльщики-боты постят свои простыни с сотнями гиперлинков. Китайцы руками вообще беспредел... Если бы за такое поисковки банили, 9 из 10 форумов были бы в бане у поисковок.

[cthu]

В роботс txt нужно вписать

User-agent: *

Host: forum.yason.org.ua "сайт изменить =)"

 

Даллее если у Вас форум был в индексе и пропал нужно написать в сапорт платону (если это яндекс) Возможно Вас забанили (поставили в фильтры) за плагиат.

 

Если Вы только раскручиваете форум

Его нужно добавить в поисковые системы

в яндекс вот здесь

Это даст медленное индексирование но даст

 

Что-бы поисковик находил лучше и чаще

необходимо проставить ссылки на других сайтах на форум (которые уже проиндексированные)

[FatCat]

Подозреваю, что может сильно влиять айпишник хостера.

Подозрения подтвердились.

Полтора года vesvalo.net был на украинском айпишнике, и яндекс нас в упор не видел. Не попадали в сотню, ноль переходов из поисковки на форум.

Чуть больше двух месяцев, как перебрались на российский айпишник, и яндекс-бот сразу стал дневать и ночевать на форуме, последние 2 недели по статистике переходов из поисковок яндекс обогнал гугла...

[roost]

ребята, помогите, в чем может быть проблема:

хостер жалуется что нагрузка слишком велика, посмотрел логи - на форуме в указанное время почти половину всей активности создавал бот яндекса

судя по логу индексировал он только главную страницу, но несколько тысяч раз

 

как его приструнить, чтобы он не создавал такой нагрузки? что можно добавить в robots.txt?

 

на данный момент содержание robots.txt следующее:

 

User-agent: *
Disallow: /cgi-bin/
Disallow: /style_images/
Disallow: /blog/
Disallow: /uploads/
Disallow: /index.php?act=Search
Disallow: /index.php?act=Login
Disallow: /index.php?act=Reg
Disallow: /index.php?act=calendar
Disallow: /index.php?act=Msg
Disallow: /index.php?act=Mail
Disallow: /index.php?act=Forward
Disallow: /index.php?act=Track
Disallow: /index.php?act=Post
Disallow: /index.php?showuser
Disallow: /index.php?act=Print
Disallow: /index.php?act=ST
Disallow: /index.php?act=boardrules
Disallow: /index.php?act=Help
Disallow: /index.php?act=Stats
Disallow: /index.php?act=Members
Disallow: /index.php?act=home
Disallow: /index.php?act=Online
Disallow: /index.php?act=SR
Disallow: /index.php?act=ICQ
Disallow: /index.php?act=MSN
Disallow: /index.php?act=AOL
Disallow: /index.php?act=AIM
Disallow: /index.php?act=SC
Disallow: /index.php?&act=
Disallow: /index.php?s=
Disallow: /index.php?act=UserCP
Disallow: /index.php?act=report
Disallow: /index.php?act=Profile
Disallow: /index.php?act=buddy
Disallow: /index.php?act=legends
Disallow: /index.php?CODE=04
Disallow: /index.php?setlanguage=1
Disallow: /index.php?act=task
Disallow: /index.php?act=findpost
Disallow: /index.php?act=module
Disallow: /index.php?automodule
Disallow: /index.php?act=attach

 

что еще можно добавить?

[Sannis]

Disallow: /*&view=getnewpost$
Disallow: /*&view=getlastpost$
Disallow: /*&view=findpost
Disallow: /*&view=new
Disallow: /*&view=old

, но не знаю, поможет ли это в вашем случае.