Здравствуйте. Просматривал недавно что там у меня гугл наиндексировал, и нашел форму регистрации, забыли пароль и прочее. А также некоторые странички форумa Kunena (Статистика, пользователи и т.д.) которые я бы индексировать вовсе не хотел. Но как запретить все это к индексации, я так и не нашел. Копался в настройках компонентов, гуглил, "Яндексил" , но ничего толком не нашел. Если кто-нибудь сталкивался, подскажите пожалуйста, как выключить индексацию компонентов?
Вот таие записи добавил в конец Robots.txt. Все правильно? Disallow: /index.php?option=com_comprofiler Disallow: /index.php?option=com_kunena Disallow: /index.php?option=com_acajoom Disallow: /index.php?option=com_phocaguestbook Disallow: /index.php?option=com_user Disallow: /templates/yoo_evolution/
Я все правильно добавил, или вместо того, чтобы запретить индексацию компонентов, я заодно и запретил индексацию всего, что содержит index.php и т.д?
Все перечисленные компоненты запрещены для индексации. Kunena тоже. Ты запретил все URL, которые начинаются с перечисленных записей
А звездочку в конце урлов не надо прописывать? Просто я полистал интернет, и некоторые пишут, что надо ставить ее, для того, чтобы не индекировались все ссылки содержащие в себе указанные в роботсе строки. В соседней теме (по немного другому вопросу), тоже посоветовали поставить звездочку. Как быть?
Я же дал ссылку - там всё черным по белому написано, да еще и примеры есть. Зачем листать интернет? Там иногда бывают вредные советы. Читай лучше руководства самих поисковиков. * - символ регулярного выражения, означает любую (в том числе пустую) последовательность символов. Строка Код (CODE): Disallow: /index.php?option=com_kunena равносильна Код (CODE): Disallow: /index.php?option=com_kunena* Т.е. весь форум не будет индексироваться. Делай как хочешь. Для примера - директива Код (CODE): Disallow: /index.php?option=com_kunena*profile будет запрещать индексировать лишь страницы, начинающиеся с index.php?option=com_kunena и содержащие в URL profile
Здравствуйте! Подскажите пожалуйста, а как быть если у меня стоит sh404sef и cb, а я хочу закрыть для индексации страницы всех пользователей (профили), то как в этом случае прописать в robots.txt или так как указано выше т.е. /index.php?option=com_comprofiler Этого будет достаточно? Заранее спасибо за ответ
мои профили следующего вида /view-user-profile.html?user=125 где 125 id юзера .. правильно ли я мыслю, что в роботс нужно прописать строку следующего вида Disallow: /view-user-profile.html?user=* ??