Язык
Контакты
GitHub
Поддержка
Регистрация
Войти
Логин: Пароль: Запомнить:
Пользователи
Последние сообщения
Ответить
1 2 3

Robots.txt под Fapos CMS

LIFE-STALKER

  • Истенный Атомовод
  • Юзер
  • 363
  • Репутация:6 
  • Предупреждения: 0 
  • Регистрация:
    25 Июн 2011
#1
Не нашел на форуме темы с robots.txt в поисковики залетает куча хлама(не нужных страниц) вот решил создать тему,где мы соберем robots.txt под Fapos CMS

И так вот что я посчитал нужным в robots.txt

Code:
User-agent: *
Disallow: /search/
Disallow: /users/
Disallow: /chat/
Disallow: /admin/

Sitemap: http://Ваш сайт/sitemap.xml

Сашка_из_Шебекино

  • Заклинатель Атома
  • Пользователь
  • 1803
  • Репутация:87 
  • Предупреждения: 0 
  • Регистрация:
    27 Мар 2011
#2
Я не уверен что нужно, но думаю что нужно обсудить на счет /users/
К примеру я иногда ищу людей, вводя их данные которые есть только на их страницах

Drunya

  • Man of God
  • Админ
  • 3527
  • Репутация:110 
  • Предупреждения: 0 
  • Регистрация:
    30 Ноя -0001
#3
ага. Я например разрешил бы users и search

Я горжусь тем, что создал бесплатную CMS - AtomX. И люблю нашу команду)

LIFE-STALKER

  • Истенный Атомовод
  • Юзер
  • 363
  • Репутация:6 
  • Предупреждения: 0 
  • Регистрация:
    25 Июн 2011
#4
Сашка_из_Шебекино пишет:
счет /users/
а что обсуждать то ладно если делать соц.сеть то да лучше users вычеркнуть из robots.txt а если обычный сайт,то это никчему в поисковых системах.


Drunya по поводу поиска-это тоже самое никакого толку только хлам в ПС.

Сашка_из_Шебекино

  • Заклинатель Атома
  • Пользователь
  • 1803
  • Репутация:87 
  • Предупреждения: 0 
  • Регистрация:
    27 Мар 2011
#5
Drunya пишет:
search
Иногда замечаю что яндекс ищет не по сайту, а в поисковике сайта. Так как поисковая формула яндекса лучше этой, то думаю есть смысл предоставить поиск поисковикам

Obmer

  • Свой человек
  • Юзер
  • 129
  • Репутация:5 
  • Предупреждения: 0 
  • Регистрация:
    1 Июн 2010
#6
Просто некоторым влом ставить поиск того же яндекса, например мне. Вот я и оставил наш поиск. Если я правильно понял о чем речь))) Так же и на этом сайте.

Отредактировано автором 11 Июл 2011
Бывает настолько сложно, что проще некуда

Drunya

  • Man of God
  • Админ
  • 3527
  • Репутация:110 
  • Предупреждения: 0 
  • Регистрация:
    30 Ноя -0001
#7
Obmer пишет:
Так же и на этом сайте.
Именно))

Я горжусь тем, что создал бесплатную CMS - AtomX. И люблю нашу команду)

Сашка_из_Шебекино

  • Заклинатель Атома
  • Пользователь
  • 1803
  • Репутация:87 
  • Предупреждения: 0 
  • Регистрация:
    27 Мар 2011
#8
Obmer пишет:
Просто некоторым влом ставить поиск того же яндекса, например мне. Вот я и оставил наш поиск. Если я правильно понял о чем речь)))
Не, не про то. К примеру я замечал когда яндекс искал не по сайту, а по поисковику сайта. Ну то есть заходит яндекс в модуль search и вводит разные команды.

И я считаю что роботам в search делать нечего, пусть своей формулой индексируют сайт, а люди пусть ищут в модуле search :)

ARMI

  • Заклинатель Атома
  • Пользователь
  • 1858
  • Репутация:46 
  • Предупреждения: 0 
  • Регистрация:
    4 Янв 2011
#9
а какая разница каким способом яша запускает роботов?

Я горжусь тем, что помогаю в развитии бесплатной CMS - AtomX

Сашка_из_Шебекино

  • Заклинатель Атома
  • Пользователь
  • 1803
  • Репутация:87 
  • Предупреждения: 0 
  • Регистрация:
    27 Мар 2011
#10
ARMI, ну ведь формула поиска фапоса наверное хуже формулы поиска яндекса (ну и других роботов). А значит пусть поисковики ищут сами, а людям пусть будет поиск от фапоса :)

1 2 3
Сейчас online: 25. Зарегистрированных: 2. Гостей: 23.