robots.txt

[Polsovatel]

Создаю robots.txt, какие папки форума лучше исключить из индексации сайта?

[vasyast]

Все наверно.

[Destruction]

Если папки имеют стандартную структуру и форум по внешним признакам легко определить как IPB, тогда все.

 

Если папки имеют нестандартную структуру, а форум по-прежнему легко определить как IPB, то все папки которые имеют стандартную структуру.

 

Если форум по внешним признакам нельзя определить как IPB - тогда ниодной.

 

Почему именно так?

1. Если форум ипб и все папки висят стандартно - от хакеров скрывать нечего. Я надеюсь все понимаете, что никто не мешает хакеру скачать robots.txt и выяснить, где у вас секретные файлы?

 

2. Если изменили путь к папке (например ips_kernel переименовали и исправили соответсвенно в index.php), а без причин это не делается - то зачем сразу всем рассказывать, что мы её переименовали? Правильно, незачем.

 

3. Если вы мастерски замаскировали форум, что теперь никто незнает, что это ипб, то зачем портить иллюзию рассказав о всех секретах в robots.txt ?

 

PS: Если хотите, чтобы роботы не индексировали "секретные папки", то:

1. Не давайте на них ссылки.

2. Запретите листинг директорий (на 99% хостеров уже запрещено).