Файл robots.txt

Robots.txt — это текстовый файл, который содержит параметры индексирования сайта для роботов поисковых систем. Обычно используется для скрытия страниц от выдачи в поиске.

Вкладка «Файл robots.txt» находится в настройках проекта.

    Детальную справку по составлению файла robots.txt можно почитать в статье Яндекса.