Как запретить индексацию страниц компонентов? (CB, Kunena, и т.д.)

Discussion in 'Общие вопросы SEO' started by deniro21, Jun 23, 2010.

  1. deniro21
    Offline

    deniro21 Пользователь

    Joined:
    Nov 23, 2009
    Messages:
    107
    Likes Received:
    4
    Gender:
    Male
    Здравствуйте. Просматривал недавно что там у меня гугл наиндексировал, и нашел форму регистрации, забыли пароль и прочее. А также некоторые странички форумa Kunena (Статистика, пользователи и т.д.) которые я бы индексировать вовсе не хотел. Но как запретить все это к индексации, я так и не нашел. Копался в настройках компонентов, гуглил, "Яндексил" , но ничего толком не нашел. Если кто-нибудь сталкивался, подскажите пожалуйста, как выключить индексацию компонентов?
     
  2.  
  3. OlegM
    Offline

    OlegM Russian Joomla! Team Staff Member

    Joined:
    Apr 12, 2007
    Messages:
    4,310
    Likes Received:
    375
    Gender:
    Male
    C помощью robots.txt
    http://help.yandex.ru/webmaster/?id=996567#996572
     
  4. deniro21
    Offline

    deniro21 Пользователь

    Joined:
    Nov 23, 2009
    Messages:
    107
    Likes Received:
    4
    Gender:
    Male
    Вот таие записи добавил в конец Robots.txt. Все правильно?:)

    Disallow: /index.php?option=com_comprofiler
    Disallow: /index.php?option=com_kunena
    Disallow: /index.php?option=com_acajoom
    Disallow: /index.php?option=com_phocaguestbook
    Disallow: /index.php?option=com_user
    Disallow: /templates/yoo_evolution/
     
  5. deniro21
    Offline

    deniro21 Пользователь

    Joined:
    Nov 23, 2009
    Messages:
    107
    Likes Received:
    4
    Gender:
    Male
    Я все правильно добавил, или вместо того, чтобы запретить индексацию компонентов, я заодно и запретил индексацию всего, что содержит index.php и т.д?
     
  6. OlegM
    Offline

    OlegM Russian Joomla! Team Staff Member

    Joined:
    Apr 12, 2007
    Messages:
    4,310
    Likes Received:
    375
    Gender:
    Male
    Все перечисленные компоненты запрещены для индексации. Kunena тоже.
    Ты запретил все URL, которые начинаются с перечисленных записей
     
  7. deniro21
    Offline

    deniro21 Пользователь

    Joined:
    Nov 23, 2009
    Messages:
    107
    Likes Received:
    4
    Gender:
    Male
    А звездочку в конце урлов не надо прописывать? Просто я полистал интернет, и некоторые пишут, что надо ставить ее, для того, чтобы не индекировались все ссылки содержащие в себе указанные в роботсе строки. В соседней теме (по немного другому вопросу), тоже посоветовали поставить звездочку. Как быть?
     
    Last edited by a moderator: Mar 31, 2014
  8. OlegM
    Offline

    OlegM Russian Joomla! Team Staff Member

    Joined:
    Apr 12, 2007
    Messages:
    4,310
    Likes Received:
    375
    Gender:
    Male
    Я же дал ссылку - там всё черным по белому написано, да еще и примеры есть. Зачем листать интернет? Там иногда бывают вредные советы. Читай лучше руководства самих поисковиков.
    * - символ регулярного выражения, означает любую (в том числе пустую) последовательность символов.

    Строка
    Код (CODE):
    1. Disallow: /index.php?option=com_kunena

    равносильна
    Код (CODE):
    1. Disallow: /index.php?option=com_kunena*

    Т.е. весь форум не будет индексироваться.
    Делай как хочешь.

    Для примера - директива
    Код (CODE):
    1. Disallow: /index.php?option=com_kunena*profile

    будет запрещать индексировать лишь страницы, начинающиеся с index.php?option=com_kunena и содержащие в URL profile
     
    deniro21 likes this.
  9. Offline

    madlen Недавно здесь

    Joined:
    Aug 23, 2009
    Messages:
    5
    Likes Received:
    0
    Gender:
    Female
    Здравствуйте! Подскажите пожалуйста, а как быть если у меня стоит sh404sef и cb, а я хочу закрыть для индексации страницы всех пользователей (профили), то как в этом случае прописать в robots.txt или так как указано выше т.е. /index.php?option=com_comprofiler Этого будет достаточно? Заранее спасибо за ответ
     
  10. OlegM
    Offline

    OlegM Russian Joomla! Team Staff Member

    Joined:
    Apr 12, 2007
    Messages:
    4,310
    Likes Received:
    375
    Gender:
    Male
    madlen, всё зависит от URL профилей.
     
  11. Offline

    madlen Недавно здесь

    Joined:
    Aug 23, 2009
    Messages:
    5
    Likes Received:
    0
    Gender:
    Female
    мои профили следующего вида /view-user-profile.html?user=125 где 125 id юзера .. правильно ли я мыслю, что в роботс нужно прописать строку следующего вида Disallow: /view-user-profile.html?user=* ??
     
  12. OlegM
    Offline

    OlegM Russian Joomla! Team Staff Member

    Joined:
    Apr 12, 2007
    Messages:
    4,310
    Likes Received:
    375
    Gender:
    Male
    Правильно, даже можно Disallow: /view-user-profile
     
    madlen likes this.
  13. Offline

    madlen Недавно здесь

    Joined:
    Aug 23, 2009
    Messages:
    5
    Likes Received:
    0
    Gender:
    Female
    :) Спасибо огромнейшее!!!
     

Share This Page

Loading...