Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

Добрый день,

есть такой вопросик. У меня большинство матералов сайта доступно только зарегестрированным юзерам. В связи с этим, поисковик Google может проиндексировать матералы только общего доступа.

Вот...
Но есть желания сдалать так, чтобы робот google мог добратья и проиндексировать все матералы сайта, включая те, что доступны только "участникам".

Как это сделать???
Есть догадка, что это делается через настройку файла robot.txt . Может кто-то сможет раскрыть тему?

заранее благодарю
Роман.

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

Робот заходит под гостем всегда, а как вы его зарегистрироваться заставите, ммм?
У вас зарегистрированная информация какого плана и каличества? Т.е. это статьи полностью или только чтобы ссылки скрыть?
Мало информации дали.

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

зарегистрироваться в adsense - и воспользоваться опцией "ставить adsense в защищённых паролем областях". исполнить указания гугла и робот придёт в защищённые места. рекламу делать видимой не обязательно.

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

Как интересно! Неужели после Адсенсового робота приходит гуглевый и логинится??? И сканит эти страницы?

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

естественно. адсенсовый и "гугловый" роботы суть один, называющийся по разному, ибо делают они одно и то же: читают страницу на тему содержания для того, чтоб знать какие адсенсы ставить и на какое место в результатах поиска. ты можешь запретить через роботс.тхт индексацию страницы, но еслиты зарегистрируешь страницу в адсенс, то робот придёт неминуемо и страницу просканит покруче, чем обычный робот.
картинку из своей адсенсы прилагаю: ту часть где предлагается сканить запароленные страницы.

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

Роботы адсенза и поисковика это разные вещи, робот поисковика в закрытую зону не пойдет.

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

Fanamura, не спорь со старым человеком. можно провести следственный эксперимент: сделать сайт с нуля, запретить в роботс.тхт индексацию, запаролить, зарегить адсенс на него - содержание сайта появится в индексе очень быстро.

топикстартер может последовать моему совету, а может и нет. захочет заработать - последует

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

chilly_bang, время нас рассудит Но вы не о чем сейчас сказали.
А причем тут robots.txt вообще ? Как он влияет на статус бота как зарегистрированного или гостя?

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

Вах! Если это так, то даже не знаю что и сказать! Даже захотелось попробовать, т.к. Сам Гугль строго говорить - что роботы Адсенс и Роботы индексирующие сайт никак не связаны, а особенно это касается именно тех самых "запароленных" страниц, т.е. Гугль гарантирует, что в Адсенсе они будут но в индексе - ни в коем случае
PS - кому верить?

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

верить некому. каждый пользуется своим опытом. при уверенности и доброте душевной - делится с окружающими.

 

Ответ: Как дать Google robots проиндексировать матералы доступные зарегестрированным пользователям?

Мне кажется, что сделать так не реально.. Первая причина - то, что пишут пользователи - это закрытая информация, я так понимаю, посему просто так поисковику туда не попасть.. Второе вряд ли ПС умеют вводить поля login/password И при этом угадывать их. )