Когда вводишь www.site_name.ru/robots.txt - в браузере отображается то, что написано в robots.txt. Как сделать так , чтобы он был не доступен? И повлияет ли это на поисковики? Сталкивался кто? Буду премного благодарен за ответ.
Повлияет, так как поисковики тоже не получат информацию и соответственно проигнорируют все правила описанные в robots.txt. Если же делать черех скрипт то можно получить бан. К тому же в robots.txt нет нечего такого что бы нельзя было показывать.