Что должнобыть в robots.txt?

Discussion in 'SEO - оптимизация, продвижение' started by Ekspert, Feb 10, 2009.

  1. Ekspert
    Offline

    Ekspert Недавно здесь

    Joined:
    Feb 9, 2009
    Messages:
    21
    Likes Received:
    0
    Gender:
    Male
    у меня в роботс.тхт кроме администратор ещё вот такой список папок..
    скажите пожалуйста он нужен там?

    п.с.подскажите где в joomla хранятся тексты статей? - содержание, названия меню.. и др. тобиш сам контент..
    в каком файле?
     
  2.  
  3. Dead Krolik
    Offline

    Dead Krolik Недавно здесь => Cпециалист <=

    Joined:
    Apr 13, 2007
    Messages:
    3,685
    Likes Received:
    101
    Gender:
    Male
    Реально - пофигу. Закрывать images я бы не стал. А все остальное - шляпа и сделано исключительно для красоты. Тексты статей хранятся в базе.
     
  4. Offline

    electric-nikola Недавно здесь

    Joined:
    Aug 4, 2010
    Messages:
    6
    Likes Received:
    1
    Gender:
    Male
    Есть два сайта, один ucozовский, другой делал на joomla. Написал статьи опубликовал на сайте с joomlа, через некоторое время на сайте ucoz. В результат через несколько месяцев сайт ucoz второй в выдаче по требуемому запросу, а сайта на joomla в выдаче нет вообще=O. Как такое может быть? посещаемость сайтов примерно одинаковая, внешних ссылок на сайт jооmla больше... У меня вывод напрашивается только один. Требуемые страницы с материалами не проиндексированы. Что может помешать индексированию кроме robots.txt?
     
  5. DKraev
    Offline

    DKraev <i>(aka gft)</i> => Cпециалист <=

    Joined:
    Aug 16, 2008
    Messages:
    1,627
    Likes Received:
    219
    Gender:
    Male
    Неуникальность контента?
     
  6. Offline

    electric-nikola Недавно здесь

    Joined:
    Aug 4, 2010
    Messages:
    6
    Likes Received:
    1
    Gender:
    Male
    Сайт представляет собой интернет магазин. Статьи о товарах в 99 процентах случаев уникальны. А вот что касается описаний товара, там информация с сайта производителя. Можно ли закрыть описания товаров для индексации, или полностью закрыть virtuemart для индексации?
     
  7. Offline

    Эльвира Недавно здесь

    Joined:
    Jun 24, 2010
    Messages:
    44
    Likes Received:
    0
    Gender:
    Female
    У меня тоже в robots.txt закрыт от индексации component, но в яндексе выдача следующая на главную страницу вот так www.i......ru/component/content/frontpage.html
    странно, как закрыть от индексации то?
     
  8. Vario
    Offline

    Vario Недавно здесь

    Joined:
    Nov 22, 2008
    Messages:
    99
    Likes Received:
    4
    Gender:
    Male
    вот вроде как правильный файл для роботов. Фигня конечно, но у меня работает..
    папка images открыта для индексации

    пользуйтесь на здоровье.. и спасибо за "спасибо"
     
    Last edited: Nov 28, 2010

Share This Page

Loading...