1. ВСЁ ЧТО НУЖНО ЗНАТЬ О JOOMLA — ЗА ОДИН ДЕНЬ!
    Гость, не пропусти Joomla!Day Russia 2017 - 20% скидка (JDCB9TOIIIA)
    Скрыть объявление

Директива Allow в robots.txt

Тема в разделе "Общие вопросы SEO", создана пользователем venom911, 02.11.2011.

  1. Offline

    venom911 Недавно здесь

    Регистрация:
    02.11.2011
    Сообщения:
    2
    Симпатии:
    0
    Пол:
    Мужской
    Всем доброго времени суток!
    Используем Joomla 1.7.2
    Цель:
    1) оптимизировать сайт под Yandex, Google и др.
    2) обеспечить безопасность (как можно сильнее замести следы Joomla :) )
    Решение:
    1) Общие настройки - Настройки SEO - все включены (.htaccess переименован)
    2) следы Jomla
    + Копирайты - Логотипы - Февикон
    + Админка - скрыта
    + Meta-теги - description - исправлены
    + Просмотр позиций для модулей ?tp=1 - отключены
    + Стандартная Постраничная навигация сайта (<< В начало < Предыдущая 1 2 3 4 5 Следующая > В конец >>) изменена
    + Содержимое папок сайта (типо site.ru/components/ - перенаправление на 404)
    + Ошибка 404 - своя
    +- Более менее изменены пути к стандартным шаблонам - (не templats/beez20/ , а templats/my_tpl/), с плагинами сложнее
    - А вот проблема: robots.txt выдаёт всех с потрахами :) :
    User-agent: *
    Disallow: /administrator/
    Disallow: /cache/
    Disallow: /cli/
    Disallow: /components/
    Disallow: /images/
    Disallow: /includes/
    Disallow: /installation/
    Disallow: /language/
    Disallow: /libraries/
    Disallow: /logs/
    Disallow: /media/
    Disallow: /modules/
    Disallow: /plugins/
    Disallow: /templates/
    Disallow: /tmp/
    # не рассматриваем директивы Sitemap,Host и т.п.

    Исходя из этого предполагаю, что поисковику разрешено смотреть только index.php, который лежит в корне.
    Для меня приоритетны только Yandex и Google - а у них появилась поддержка директивы Allow (см. http://help.yandex.ru/webmaster/?id=996567#996571и http://www.google.com/support/webmasters/bin/answer.py?hl=ru&answer=156449)
    Возникает вопрос: не навредит ли (будет ли полезен) такой robots.txt?

    User-agent: Yandex
    Allow: /index.php
    Disallow: /

    User-agent: Googlebot
    Allow: /index.php
    Disallow: /

    User-agent: *
    Disallow:

    -- p.s. Погуглив вопрос, нашёл только кучу насмешек над процессом скрытия следов Joomla, наподобие: что так делают "маразматики", " параноики" и т.п. - прошу данное мнение оставить при себе :gratitude:
    Всем спасибо, жду комментариев
     
  2.  

Поделиться этой страницей

Загрузка...