Главная / Блог / Robots.txt: тонкая просьба к роботу, не сейф

Robots.txt: тонкая просьба к роботу, не сейф

Обновлено 2026-10-22

Robots.txt лежит в корне и говорит роботам, куда лучше не ходить. Это просьба, не замок. Секретные страницы им не прячут.

Частые ошибки

Disallow: / на всём сайте после переезда. Закрытый раздел, который должен быть в поиске. Открытые черновики и корзина.

Реклама

Закрытый от индекса раздел может жить, но новых людей из поиска не будет. Без людей слот пустой. Индексация — статья. Noindex — рядом.