Поисковый бот яндекса

[drakoshka]

Как можно удалить поисковые боты чтобы они не лазали на сайте, уже забанила яндекс по его IP но толку ноль как лазил так и лазает. Потому что уже отключают сайт из за того что этот гаденыш создает аж 22% нагрузки на сервер

[Vilz]

в поиск по robots.txt

[sudmed]

Это ненормальная ситуация, меняйте хостера. Иначе дальше уже пользователи начнут вызывать нагрузку, потом и просто статические страницы или картинки, и даже, как иногда встречается у особо глючных хостеров, - отключенный форум начнет грузить сервер.

[G*g]

Это ненормальная ситуация, меняйте хостера. Иначе дальше уже пользователи начнут вызывать нагрузку, потом и просто статические страницы или картинки, и даже, как иногда встречается у особо глючных хостеров, - отключенный форум начнет грузить сервер.

согласен. а еще назовите своего хостера нам, чтобы все знали у кого хостинг такой паршивый.

[drakoshka]

хостинг от петерхоста, да вот уже переезжать буду

 

в поиск по robots.txt

а поподробней можно?

[Vilz]

по подробнее.

 

если вы правша, берете мышь в правую руку

если левша, соответственно в левую

если у вас планшет, берете перо

с помощью выбранного устройства подводите курсор к пункту поиск в шапке форума

он находится чуть ниже кнопки "контакты" и правее пункта "помощь"

нажимаете левой кнопкой (или просто тыкаете если у вас планшет) в эту кнопку

появляется маленькое окошко "поиска" в нем вводите robots.txt и убираете галочку "в этом форуме"

жмете энтер или нажимаете мышкой на соответствующую кнопку в форме

 

смотрите найденые темы на предмет того для чего нужен файл robots.txt и как с помощью него закрыть ботам доступ к форуму...

в общем то всё

 

вот например весьма подробно

[drakoshka]

спасибо большое

[Song]

Точно следовали инструкции?

[drakoshka]

я просто сначала не поняла о чем речь

[Wolf Messing]

Могу роботсом поделиться для усмирения поисковиков. Выработам годом мучений с ними.

[sudmed]

Wolf Messing, раз реплика никому персонально не адресована, то уже выкладывай для всех.

[drakoshka]

Могу роботсом поделиться для усмирения поисковиков. Выработам годом мучений с ними.

если можно, а то уже прям беда

[Galadriel]

User-agent: Yandex

Allow: /lofiversion

Disallow: /

 

 

читаем маны от яндекса

[Vilz]

фи какая мерзость ... когда в поисковике нахожу лофи версию, никогда не читаю

я наоборот её закрыл

[Wolf Messing]

User-agent: *

Disallow: /style_images/

Disallow: /lofiversion/

Disallow: /index.php?act=idx

Disallow: /index.php?act=Login

Disallow: /index.php?act=Search

Disallow: /index.php?act=Shoutbox

Disallow: /index.php?act=Reg

Disallow: /index.php?act=Msg

Disallow: /index.php?act=Mail

Disallow: /index.php?act=Forward

Disallow: /index.php?act=Track

Disallow: /index.php?act=Post

Disallow: /index.php?act=post

Disallow: /index.php?act=Print

Disallow: /index.php?act=ST

Disallow: /index.php?act=boardrules

Disallow: /?act=boardrules

Disallow: /index.php?act=Help

Disallow: /index.php?act=Stats

Disallow: /index.php?act=stats

Disallow: /index.php?act=Members

Disallow: /index.php?act=Online

Disallow: /index.php?act=calendar

Disallow: /index.php?act=SR

Disallow: /index.php?act=SF

Disallow: /index.php?act=ICQ

Disallow: /index.php?act=MSN

Disallow: /index.php?act=AOL

Disallow: /index.php?act=AIM

Disallow: /index.php?act=SC

Disallow: /index.php?act=task

Disallow: /index.php?act=findpost

Disallow: /index.php?act=UserCP

Disallow: /index.php?act=usercp

Disallow: /index.php?&act=

Disallow: /index.php?act=report

Disallow: /index.php?act=buddy

Disallow: /index.php?act=legends

Disallow: /index.php?CODE=

Disallow: /index.php?act=attach

Disallow: /index.php?act=Attach

Disallow: /index.php?&&CODE=

Disallow: /index.php?&debug=1

Disallow: /index.php?act=Profile

Disallow: /index.php?showuser

Disallow: /index.php?s=

Disallow: /index.php?autocom=chatsigma

Disallow: /index.php?autocom=chatpara

Disallow: /*&view=getnewpost$

Disallow: /*&view=getlastpost$

Disallow: /*&view=old$

Disallow: /*&view=new$

Disallow: /*&view=getfirst$

Disallow: /*&view=getprevious$

Disallow: /*&view=getnext$

Disallow: /*&view=getlast$

Disallow: /*mode=linear

Disallow: /*mode=threaded

Disallow: /*mode=linearplus

Disallow: /*&p=

Disallow: /*&pid=

Disallow: /*&gopid=

Disallow: /*&hl=

Disallow: /*&start=

Disallow: /*&showtopic

Disallow: /*gallery&req=stats

Disallow: /*gallery&req=user

Disallow: /*gallery&req=slideshow

Disallow: /*reportimage

Disallow: /*forum/index.php$

[Проли]

И что ему останется сканировать? Топики, хоть будет сканировать?

 

Я конечно не против Яши, но у меня после их запуска Магадана, он на форуме звереет. Постоянно, каждые сутки 30000 – 50000т заходов, и сжирает гад, примерно за сутки 500 - 800мб трафа

 

И я тут подумываю, а нужен ли он мне вообще.

[FatCat]

И я тут подумываю, а нужен ли он мне вообще.

Все же один из основных поставщиков трафика на сайт...