какие символы или коды надо прописать в robot.txt чтобы закрыть страницы от индексации

seo yandex администрирование txt Robot

какие символы или коды надо прописать в robot.txt чтобы закрыть страницы от индексации, или как правильно написать robot.txt
Ответы:
не robot.txt, а robotS.txt
пример файла:
Разные поисковики могут несколько по-разному трактовать robots.txt, но едины они в основном:
1 - robots.txt создается в корне сайта
2 - следующие интрукции все роботы понимаютс однозначно:
User-agent: *
Disallow: /stranica.html


16 лет назад

RPI.su - самая большая русскоязычная база вопросов и ответов. Наш проект был реализован как продолжение популярного сервиса otvety.google.ru, который был закрыт и удален 30 апреля 2015 года. Мы решили воскресить полезный сервис Ответы Гугл, чтобы любой человек смог публично узнать ответ на свой вопрос у интернет сообщества.

Все вопросы, добавленные на сайт ответов Google, мы скопировали и сохранили здесь. Имена старых пользователей также отображены в том виде, в котором они существовали ранее. Только нужно заново пройти регистрацию, чтобы иметь возможность задавать вопросы, или отвечать другим.

Чтобы связаться с нами по любому вопросу О САЙТЕ (реклама, сотрудничество, отзыв о сервисе), пишите на почту [email protected]. Только все общие вопросы размещайте на сайте, на них ответ по почте не предоставляется.