Вопрос по robots.txt

Discussion in 'Общие вопросы SEO' started by stendapuss, Nov 27, 2012.

  1. Offline

    stendapuss Пользователь

    Joined:
    Sep 9, 2011
    Messages:
    324
    Likes Received:
    4
    Gender:
    Male
    Вопрос по robots.txt.
    Страница сайта разбита на под страницы. Есть меню страницы. В этом меню в самом низу присутствует пункт все страницы. Открываются все под страницы сразу. Думаю этот пункт не должен индексироваться роботом. Или не так?
    Его адрес
    h ttp://сайт/uchebnie_rolikivideo?showall=1&limitstart=
    Как правильно прописать в robots.txt, чтоб поисковый робот не индексировал этот пункт меню?
    На странице h ttp://help.yandex.ru/webmaster/?id=996567
    ответ не нашел.
    Там написано как ограничить каталог, ведь 1&limitstart получается не каталог ?, нет разделения /, только разделение =
    Если прописать Disallow: /1&limitstart
    Будет не правильно?
    Или опять что то не дочитал
    Спасибо.
     
  2.  
  3. OlegM
    Offline

    OlegM Russian Joomla! Team Staff Member

    Joined:
    Apr 12, 2007
    Messages:
    4,310
    Likes Received:
    375
    Gender:
    Male
    Не дочитал.

    Смотри пункт Использование спецсимволов "*" и "$"
    Правильно
    Код (CODE):
    1. Disallow: /*?showall=1&limitstart=

    или
    Код (CODE):
    1. Disallow: /*1&limitstart
     
  4. Offline

    stendapuss Пользователь

    Joined:
    Sep 9, 2011
    Messages:
    324
    Likes Received:
    4
    Gender:
    Male
    спасибо, написал так
    Disallow: *1&limitstart

    Понял так:
    В данном случае слэш можно писать, а можно и не писать - правило от этого не изменится, так как каждая страница в своём адресе обязательно содержит этот символ.

    проверил яндексом, пишет запрещена в робот тхт.
    Значит правильно.
    Спасибо.
     
    Last edited: Nov 29, 2012
  5. Offline

    stendapuss Пользователь

    Joined:
    Sep 9, 2011
    Messages:
    324
    Likes Received:
    4
    Gender:
    Male
    Вопрос, а надо ли закрывать?
    Дубли страниц это?
    Или все равно закрыть, чтоб робот время не убивал?
    Спасибо
     

Share This Page

Loading...