Частичная индексация

Добрый день.

Столкнулся с проблеммой: сайт зарегистрирован в Яндексе, Гугле, Рамблере. Яндекс проиндексировал практически весь сайт, Гугл порядка 1/3, Рамблер же проиндексировал 2-3% от всего содержимого сайта. В чем может быть проблема с рамблером ? почему он нехочет индексировать старницы ?

Мой robots.txt:

Код (html):

1. User-agent: *
2. Disallow: /administrator/
3. Disallow: /cache/
4. Disallow: /editor/
5. Disallow: /help/
6. Disallow: /includes/
7. Disallow: /language/
8. Disallow: /media/
9. Disallow: /modules/
10. Disallow: /installation/
11. Allow: /

 

Ждааааааааааааааааааааааааать... ну и ссылками кормить

 

дык сколько ждать можно ? )))) уже как месяц на рамблере зарегистрированны, а он все никак не пробегает наш сайтик (

 

а что вы вообще на рамблер смотрите? Он сегодня не в фаворе.
А по поводу индексации надо ждать...

 

Рэмблер вообще обычно через полгода вспонимает.. гугль тож месяцок-другой-третий если сайт не особо популярный

 

а кто сейчас в фаворе ? )

 

яндекс, гугл, яху

 

Вот что мне ответил суппорт Рамблера:

 

Ссылку на сайт дайте, можно в личку

 

www.avangard-sk.ru

 

содержание роботс -

Код (PHP):

1. User-agent: *
2. Disallow: /administrator/
3. Disallow: /cache/
4. Disallow: /editor/
5. Disallow: /help/
6. Disallow: /includes/
7. Disallow: /language/
8. Disallow: /media/
9. Disallow: /modules/
10. Disallow: /installation/
11. Allow: /

Ответ от сервера -

Код (PHP):

1. HTTP/1.1 200 OK
2. Date: Wed, 10 Sep 2008 08:47:17 GMT
3. Server: Apache
4. X-Powered-By: PHP/5.1.6
5. Expires: Mon, 26 Jul 1997 05:00:00 GMT
6. Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0
7. Pragma: no-cache
8. Set-Cookie: 979a8319d6d5786899bbd01c6cff0f86=-; path=/
9. Last-Modified: Wed, 10 Sep 2008 08:47:17 GMT
10. Connection: close
11. Transfer-Encoding: chunked
12. Content-Type: text/html; charset=cp1251

рамблер не закрыт, в ответе нет никакого редиректа.

Беглый осмотр кода тоже ничего не выявил, единственный косяк - ссылка рамблер-топ100 в секции head

 

а че тогда мне саппорт моги еб.ет ?

можно по поводу ссылки на топ100 поподробнее, почему это косяк ?

Добавлено через 2 минуты
про ссылочку - затупил , и только что исправил ))))

как быть с поисковиком ? саппорт настаивает на своём (

 

А можно их спросить куда собственно идет у них редирект? Потому как 301 ошибка - это сдвинут навсегда(вольный перевод), а вот куда интересно.
Возможно был глюк на хостинге. Еще раз писать в суппорт и ждать.

 

Добрый день.

После переписки с саппортом, рамблер мне ответил:

Просто не могу понять, что они от меня хотят.... )))

 

http://robotstxt.org.ru/rurobots/yandex#h79-4

Юзерагента можно вот так
User-agent: *

 

У меня так и есть в роботс:

 

Еще раз значит писать об этом, что все есть : ) Очень странно, что они настаивают на том, что робот получает 302

 

а почему при входе на сайт сразу без уведомления начинают загружаться две PDF?

 

первый раз об этом слышу... можно имена файлов и урлы ?