ТРАФИК - СРОЧНО ХЕЛП

[Neo[CCCP]]

msnbot.msn.com - 353MB

mole-out.yandex.ru - 305MB

kalan-out.yandex.ru - 309MB

magpie-out.yandex.ru - 274MB

 

И.т.д. за месяц небольшой форум генерерует 2,5-3гига трафика.

 

 

Как бы это исправить?

[Dekker]

можно заблокировать в robot.txt наиболее назойливых, можно как-то грамотно послать хостера на три буквы потому что он не должен считать этот траф, потому что он левый.[1111221557:1111221803]robots.txt прошу прощения.

[Neo[CCCP]]

поподробнее можно? где лежит этот файлик? как туда что прописывать?

[Наблюдатель]

Исключить посещение всего сервера всеми роботами:

robots.txt

User-agent: *
Disallow: /

 

Этот файл положи в корень конфы, рядом с admin.php и index.php

 

Кроме этого, можешь в АдминЦентр - Скины - Управление скинами

нажать в каждом скине на самою верхнюю ссылку Редактировать HTML-шаблон шапки и подвала и вставить ниже строки с чарсетом... ЭТО

 

Кроме этого, в админке укажи группу, к которой будут принадлежать все боты... Banned - это их ваще на конфу не пустит... (ну ты и садист!)

[stanishevsky]

А я написал в robots.txt:

 

User-agent: *

Disallow: /index.php

 

 

и настроил lo-fi версию, которую у меня все поисковики теперь и индексируют.

[abram4]

и настроил lo-fi версию, которую у меня все поисковики теперь и индексируют.

<{POST_SNAPBACK}>

А можно поподробнее ?

[abram4]

На днях хостер подключил скрипт статистики awstats и страшное дело я там увидел - две трети платного трафика сожрал Яндекс и только треть пошла юзерам !

http://img484.imageshack.us/img484/9759/robots6jv.gif

 

http://img484.imageshack.us/img484/9256/robots21oj.gif

 

И это на малюсеньком форуме! А что же делается там, где в день сотни постов и тыщи юзеров ходят?

Со зла сделал как и stanishevsky, написал Disallow: /index.php , терпеть эдакое уродство сил нет Вот только с lo-fi какая-то трабла нарисовывается, пока не разобрался с ней.

[профф]

подключись к нормальному хостеру с анлим трафиком (например, Мастерхост) и никаких проблем

P.S. у меня около 1Тб трафика и я за него не плачу.

[Alex]

Цитата(

Цитата

)

и настроил lo-fi версию, которую у меня все поисковики теперь и индексируют. А можно поподробнее ?

 

Тоже присоединяюсь?

 

Как сделать чтобы роботы юзали только lo-fi версию?

[abram4]

подключись к нормальному хостеру с анлим трафиком (например, Мастерхост) и никаких проблем

P.S. у меня около 1Тб трафика и я за него не плачу.

<{POST_SNAPBACK}>

До настолько нормального хостера я еще не дорос

 

Как сделать чтобы роботы юзали только  lo-fi версию?

<{POST_SNAPBACK}>

Дык, вот ответ -

А я написал в robots.txt:

 

User-agent: *

Disallow: /index.php

После этого роботам только и останется линк на lo-fi

[Destruction]

Гмм, а почему меня этот вопрос не напрягает?

 

Аж интересно стало, пойду спрошу у хостера :-D

 

И я несколько не понял, разве * не означает любой юзер-агент? Гмм, всё понял, иду читать ФАК )