Помогите с robots.txt

[boltuk]

Помогите пожалуйста с robots.txt, не могу разобраться...

Вообщем у меня стоит сайт и форум. сайт на движке(Joomla), форум(IPB). На форуме стоит мод (DB23) Google SiteMap Generator.

Сайт лежит в корне, форум в директории /forum/.

Вопрос №1: robots.txt в какой директории должен лежать? В корне или /forum/, или там и там?

Вопрос №2: в robots.txt что прописать используя мод (DB23) Google SiteMap Generator? Sitemap: а дальше какой путь на какой файл?

Вопрос №3: какой адресс в robots.txt прописать? www.mysite.ru или www.mysite.ru/forum/ или оба прописать? что бы поисковики видели как главный адресс.

 

Простите что такое спрашиваю, читал статьи но так ничего и не понял. Помогите пожалуйста, буду очень Вам признателен.

Спасибо.

[KODEAK]

1 и там и там

2 Google SiteMap Generator ни имеет ни какого отношения вроде как к robots.txt

3 пункт первый

и давно бы пора обновиться на 3 =)

Изменено 28 Августа 2010 пользователем KODEAK

[boltuk]

1 и там и там

2 Google SiteMap Generator ни имеет ни какого отношения вроде как к robots.txt

3 пункт первый

и давно бы пора обновиться на 3 =)

 

К сожаленью нет такой возможности, т.к все сделано для 2.3.6, много потрачено было на это усилий, а делать все заного для меня самоубийство. Где-то писалось что надо после установки данного мода прописывать, вот только что)))

1. В первом варианте и там и там роботс?

[KODEAK]

да, для каждого скрипта свой robots.txt (у IPB свой у Joomla свой), от же закрывает ссылки для роботов от индексации

[boltuk]

да, для каждого скрипта свой robots.txt (у IPB свой у Joomla свой), от же закрывает ссылки для роботов от индексации

 

Подскажи пожалуйста по данному моду (DB23) Google SiteMap Generator.

писалось что нужно вписывать после установки мода в robots.txt,

В конце, после всех строк с disallow впиши:

Sitemap: http://<путь к форуму>/indexsitemap.xml

 

Мод делает несколько хмл-архивов и потом их сшивает - где-то читал...

 

Вот код indexsitemap.xml:

 

<?xml version="1.0" encoding="UTF-8" ?>

- <sitemapindex xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">

- <sitemap>

<loc>http://www.mysite.ru/forum/userssitemap.xml</loc>

<lastmod>2010-08-28T07:20:10+00:00</lastmod>

</sitemap>

</sitemapindex>

 

 

 

Тоетсь будет правильно если я укажу Sitemap: http://<путь к форуму>/indexsitemap.xml или siteindex.xml?

[Sannis]

Хм, вы, похоже, пока даже мод в АЦ не настроили.

[boltuk]

Ввел ID форумов в моде.

А код то не со своего взял))) А пример)))

Sannis, подскажи пожалуйста что писать в robots.txt в данном случае?

Изменено 30 Августа 2010 пользователем boltuk

[Arhar]

думаю, не надо ничего в роботс писать, просто зарегистрировать в яндекс.вебмастере и гугль.вебмастере свой сайт, там есть куча интересных инструментов, в том числе регистрация сайтмап, он также скажет, есть ли в сайтмап ошибки

ну и не говоря про такую вещь, как самые популярные поисковые запросы к сайту

[boltuk]

Все же хотелось бы узнать по данному случаю... если кто знает, помогите пожалуйста. Всем вышеотписавшимся спасибо за помощь.