Как запретить индексацию страниц компонентов? (CB, Kunena, и т.д.)

Тема в разделе "Общие вопросы SEO", создана пользователем deniro21, 23.06.2010.

  1. deniro21
    Offline

    deniro21 Пользователь

    Регистрация:
    23.11.2009
    Сообщения:
    107
    Симпатии:
    4
    Пол:
    Мужской
    Здравствуйте. Просматривал недавно что там у меня гугл наиндексировал, и нашел форму регистрации, забыли пароль и прочее. А также некоторые странички форумa Kunena (Статистика, пользователи и т.д.) которые я бы индексировать вовсе не хотел. Но как запретить все это к индексации, я так и не нашел. Копался в настройках компонентов, гуглил, "Яндексил" , но ничего толком не нашел. Если кто-нибудь сталкивался, подскажите пожалуйста, как выключить индексацию компонентов?
     
  2.  
  3. OlegM
    Offline

    OlegM Russian Joomla! Team Команда форума

    Регистрация:
    12.04.2007
    Сообщения:
    4 311
    Симпатии:
    375
    Пол:
    Мужской
    C помощью robots.txt
    http://help.yandex.ru/webmaster/?id=996567#996572
     
  4. deniro21
    Offline

    deniro21 Пользователь

    Регистрация:
    23.11.2009
    Сообщения:
    107
    Симпатии:
    4
    Пол:
    Мужской
    Вот таие записи добавил в конец Robots.txt. Все правильно?:)

    Disallow: /index.php?option=com_comprofiler
    Disallow: /index.php?option=com_kunena
    Disallow: /index.php?option=com_acajoom
    Disallow: /index.php?option=com_phocaguestbook
    Disallow: /index.php?option=com_user
    Disallow: /templates/yoo_evolution/
     
  5. deniro21
    Offline

    deniro21 Пользователь

    Регистрация:
    23.11.2009
    Сообщения:
    107
    Симпатии:
    4
    Пол:
    Мужской
    Я все правильно добавил, или вместо того, чтобы запретить индексацию компонентов, я заодно и запретил индексацию всего, что содержит index.php и т.д?
     
  6. OlegM
    Offline

    OlegM Russian Joomla! Team Команда форума

    Регистрация:
    12.04.2007
    Сообщения:
    4 311
    Симпатии:
    375
    Пол:
    Мужской
    Все перечисленные компоненты запрещены для индексации. Kunena тоже.
    Ты запретил все URL, которые начинаются с перечисленных записей
     
  7. deniro21
    Offline

    deniro21 Пользователь

    Регистрация:
    23.11.2009
    Сообщения:
    107
    Симпатии:
    4
    Пол:
    Мужской
    А звездочку в конце урлов не надо прописывать? Просто я полистал интернет, и некоторые пишут, что надо ставить ее, для того, чтобы не индекировались все ссылки содержащие в себе указанные в роботсе строки. В соседней теме (по немного другому вопросу), тоже посоветовали поставить звездочку. Как быть?
     
    Последнее редактирование модератором: 31.03.2014
  8. OlegM
    Offline

    OlegM Russian Joomla! Team Команда форума

    Регистрация:
    12.04.2007
    Сообщения:
    4 311
    Симпатии:
    375
    Пол:
    Мужской
    Я же дал ссылку - там всё черным по белому написано, да еще и примеры есть. Зачем листать интернет? Там иногда бывают вредные советы. Читай лучше руководства самих поисковиков.
    * - символ регулярного выражения, означает любую (в том числе пустую) последовательность символов.

    Строка
    Код (CODE):
    1. Disallow: /index.php?option=com_kunena

    равносильна
    Код (CODE):
    1. Disallow: /index.php?option=com_kunena*

    Т.е. весь форум не будет индексироваться.
    Делай как хочешь.

    Для примера - директива
    Код (CODE):
    1. Disallow: /index.php?option=com_kunena*profile

    будет запрещать индексировать лишь страницы, начинающиеся с index.php?option=com_kunena и содержащие в URL profile
     
    deniro21 нравится это.
  9. Offline

    madlen Недавно здесь

    Регистрация:
    23.08.2009
    Сообщения:
    5
    Симпатии:
    0
    Пол:
    Женский
    Здравствуйте! Подскажите пожалуйста, а как быть если у меня стоит sh404sef и cb, а я хочу закрыть для индексации страницы всех пользователей (профили), то как в этом случае прописать в robots.txt или так как указано выше т.е. /index.php?option=com_comprofiler Этого будет достаточно? Заранее спасибо за ответ
     
  10. OlegM
    Offline

    OlegM Russian Joomla! Team Команда форума

    Регистрация:
    12.04.2007
    Сообщения:
    4 311
    Симпатии:
    375
    Пол:
    Мужской
    madlen, всё зависит от URL профилей.
     
  11. Offline

    madlen Недавно здесь

    Регистрация:
    23.08.2009
    Сообщения:
    5
    Симпатии:
    0
    Пол:
    Женский
    мои профили следующего вида /view-user-profile.html?user=125 где 125 id юзера .. правильно ли я мыслю, что в роботс нужно прописать строку следующего вида Disallow: /view-user-profile.html?user=* ??
     
  12. OlegM
    Offline

    OlegM Russian Joomla! Team Команда форума

    Регистрация:
    12.04.2007
    Сообщения:
    4 311
    Симпатии:
    375
    Пол:
    Мужской
    Правильно, даже можно Disallow: /view-user-profile
     
    madlen нравится это.
  13. Offline

    madlen Недавно здесь

    Регистрация:
    23.08.2009
    Сообщения:
    5
    Симпатии:
    0
    Пол:
    Женский
    :) Спасибо огромнейшее!!!
     

Поделиться этой страницей

Загрузка...