Как урезать поисковику доступ?

[WNN]

Вот рамблер наглым образом шарится в клендаре уже недели 2...

Как запретить календарь поисковикам? А так же ещё не нужные поиску функции?

[Christoph Schneider]

Создай группу, например "боты"

Убери все ненужные права (поиск, календарь)

Ну и перемести ботов в эту группу, которую ты создал

[borchuk]

Через групповые настройки просмотр календаря никак не заблочить.

Надо сделать копию скина и оттуда вручную повычищать всё лишнее - календарь, "переслать сообщение другу", отпечатать, поиск и всякую прочую лабуду. а потом этот скин прописать ботам

[WNN]

borchuk

Спасибо! Очень помог!

 

Но вот ещё такая фигня есть.

Рамблер то уже себе записал страницы то со ссылками. И если ссылки на календарь не будет в скине, то в рамбелере записаны ссылки включая календарь и всё такое прочее. Он же как как делает:

index.php?act=BLABLABLA_KALENDAR_BLABLABLA

т.е. надо ещё посиковику запретить act kalendar и showeek.

Как это сделать?

 

Или поможет только скин?

[s0nik]

Можно через Robots.txt сделать.

У меня так:

 

User-agent: *

Disallow: /style_images/

Disallow: /ips_kernel/

Disallow: /skin_cache/

Disallow: /jscripts/

Disallow: /modules/

Disallow: /retail/

Disallow: /uploads/

Disallow: /skin_acp/

Disallow: /sources/

Disallow: /cache/

Disallow: /lang/

Disallow: /style_avatars/

Disallow: /style_emoticons/

Disallow: /admin.php

Disallow: /ipb_templates.xml

Disallow: /conf_global.php

Disallow: /conf_global-bak.php

Disallow: /index.php?act=Search

Disallow: /index.php?act=Login

Disallow: /index.php?act=Reg

Disallow: /index.php?act=calendar

Disallow: /index.php?act=Msg

Disallow: /index.php?act=Mail

Disallow: /index.php?act=Forward

Disallow: /index.php?act=Track

Disallow: /index.php?act=Post

Disallow: /index.php?showuser

Disallow: /index.php?act=Print

Disallow: /index.php?act=ST

Disallow: /index.php?act=boardrules

Disallow: /index.php?act=Help

Disallow: /index.php?act=Stats

Disallow: /index.php?act=Members

Disallow: /index.php?act=home

Disallow: /index.php?act=Online

Disallow: /index.php?act=SR

Disallow: /index.php?act=ICQ

Disallow: /index.php?act=MSN

Disallow: /index.php?act=AOL

Disallow: /index.php?act=AIM

Disallow: /index.php?act=SC

Disallow: /index.php?s=

Disallow: /index.php?act=UserCP

Disallow: /index.php?act=report

Disallow: /index.php?act=Profile

Disallow: /index.php?act=buddy

Disallow: /index.php?act=legends

Disallow: /&debug=1$

Disallow: /index.php?setskin=1

Disallow: /index.php?setlanguage=1

Disallow: /index.php?act=task

Disallow: /index.php?act=findpost

[Valera]

Disallow: /index.php?act=Search Disallow: /index.php?act=Login Disallow: /index.php?act=Reg Disallow: /index.php?act=calendar Disallow: /index.php?act=Msg Disallow: /index.php?act=Mail Disallow: /index.php?act=Forward Disallow: /index.php?act=Track Disallow: /index.php?act=Post Disallow: /index.php?showuser Disallow: /index.php?act=Print

 

Поисковики игнорируют параметры после знака вопроса вместе с ним (так что фича не будет работать)

информацию об этом прочитал на руборде.

[s0nik]

Valera

Судя по этой теме http://forums.invisionpower.com/index.php?showtopic=148689 всё работает... Хотя может это только наши поисковики не понимают вопросы?

[WNN]

подскажите новичку как запретить при помощи robots.txt

чёнить в meta теге надо писать подикась?да ещё подикась и на каждой странице?

[s0nik]

WNN

Ничего не надо, просто в корень форума положить файл и всё.

[WNN]

ок. Пасиб

вот яхуууу не смотрел у меня календарь. он сразу все топы прошёл и всех челов.

а вот рамблер... чёто он...

[WNN]

не работает опять! по прежнему act=calendar******=showeek=!!!

чё делать?

[Valera]

еме http://forums.invisionpower.com/index.php?showtopic=148689 всё работает...

А можно процитировать что там написано?

[WNN]

написал в рамблер саппорт письмецо с вопросом.

вот что ответили:

 

В файле robots.txt в корне сайта можно прописать:

 

User-agent: StackRambler

Disallow: *act=calendar

 

Это запретит скачивать все страницы, в которых есть подстрока

act=calendar

 

Или завернуть кусок html в <noindex></noindex>.

 

что я и сделал. посмотрим результат)

[abram4]

что я и сделал. посмотрим результат)

<{POST_SNAPBACK}>

А доложить результат забыл ?

[WNN]

да рамблеру ваще пофиг. всё равно индексирует всё подряд.

роботс.txt ему не преграда.. и он как индексировал календарь так и продолжает индекисровать.

[Deva]

А Яндекс как?

[Evgheni]

а не проще ли забанить самого "user agent" через .htaccess ?

[WNN]

как?

нужно чтобы поисковики не кликали по ссылкам содержащим календарь.

[dfc_darkman]

запакуй календарь в тег <no index>[1118066891:1118066927]или же все ссылки, ведущие к календарю возьми в этот тег

[WNN]

да проблема в том что поисковик себе в память забил кучу страниц с календарём и все ссылки на них теперь обходит.