robots.txt

Intellect Board — cистема управления сайтом

Построение сайта на основе форума

Intellect Board — cистема управления сайтом »   Техническая поддержка версии 2.19 »   robots.txt
RSS

robots.txt

правильно ли настроен файл?

Текущий рейтинг темы: Нет
Выводить сообщения

<<Назад  Вперед>>Модераторы: aerograf, wsxПечать
 
assessor
Долгожитель форума


Всего сообщений: 495
Рейтинг пользователя: 14


Ссылка


Дата регистрации на форуме:
13 фев. 2007
Чтобы пауки не ходили куда-не-надо я прописал в robots.txt такой вот код.
--------------------------------------------------------------------------------------------------------------
User-Agent: *
Disallow: /forum/index.php?f=26
Disallow: /forum/index.php?m=profile&u=
Disallow: /forum/index.php?m=messages&a=newmsg&u=
Disallow: /forum/index.php?a=edit&m=profile
Disallow: /forum/index.php?a=login&m=profile
Disallow: /forum/index.php?a=rules&m=profile
Disallow: /forum/index.php?a=listusers&m=profile
Disallow: /forum/index.php?a=online&m=profile
Disallow: /forum/index.php?m=group
Disallow: /forum/index.php?m=filelist
Disallow: /forum/index.php?m=search
Disallow: /forum/index.php?m=drafts
Disallow: /forum/index.php?m=bookmark
Disallow: /forum/index.php?m=messages
Disallow: /forum/index.php?m=subscr
---------------------------------------------------------------------------------
Правильно ли сделано?
mazut
Начинающий

mazut
Откуда: Berlin
Всего сообщений: 45
Рейтинг пользователя: 0


Ссылка


Дата регистрации на форуме:
16 июня 2007
assessor
Долгожитель форума


Всего сообщений: 495
Рейтинг пользователя: 14


Ссылка


Дата регистрации на форуме:
13 фев. 2007

mazut написал:
[q]
В инете поискать, есть даже генераторы для этого

http://www.seochat.com/seo-tools/robots-generator/

http://www.searchengines.ru/articles/004486.html

http://kmstudio.ru/kms_catalog+stat+cat_id-1+nums-10.html
[/q]

Спасибо за ссылки, но речь идет о конкретной настройке для ФОРУМА версии 2.19
Никакой генератор не сделает автоматом эту настройку. Это делается вручную, зная куда не надо пускать пауков.
Вот я и спросил, правильно ли для форума Intellect Board 2.19 написаны запреты для пауков? И еще куда не нужно их пускать?
4X_Pro
Руководитель Проекта
Настоящий Компьютерщик
4X_Pro
Откуда: Москва
Всего сообщений: 3299
Рейтинг пользователя: 70


Ссылка


Дата регистрации на форуме:
29 сен. 2001
С виду правильно (хотя, может быть, если поискать, можно еще места найти)... Вопрос только, умеют ли боты обрабатывать URLы с ? в robots.txt.
И почему закрыт раздел 26?

---
Спорить со мной по поводу того, что в IntB будет, а чего нет -- бесполезно!
assessor
Долгожитель форума


Всего сообщений: 495
Рейтинг пользователя: 14


Ссылка


Дата регистрации на форуме:
13 фев. 2007

XXXX Pro написал:
[q]
....И почему закрыт раздел 26?
[/q]

ЧАТ ТАМ.
<<Назад  Вперед>>Модераторы: aerograf, wsxПечать
Intellect Board — cистема управления сайтом »   Техническая поддержка версии 2.19 »   robots.txt
RSS

1 посетитель просмотрел эту тему за последние 10 минут
В том числе: 1 гость, 0 скрытых пользователей

Последние RSS
Ограничение доступа
не отображаются разделы
Архив версий
Установка стиля на Intellect Board 2.22
Завершилась работа над новой версией 3.00

Самые активные 5 тем RSS


Время выполнения скрипта: 0.0586. Количество выполненных запросов: 17, время выполнения запросов 0.0000
Creative Commons License Rambler's Top100 Rambler's Top100 Рейтинг@Mail.ru Valid HTML 4.01 Transitional Valid CSS!