Robots.txt, noindex и авторизация решают разные задачи

Разделите три механизма

Robots.txt сообщает правила обхода поддерживающим их роботам. Noindex задаётся в HTML или HTTP-заголовке для управления индексированием. Авторизация проверяет, разрешено ли конкретному посетителю читать данные. Нельзя заменить третий механизм первыми двумя.

Например, заказ покупателя должен проверять владельца на сервере. Скрытие его пути в robots.txt не мешает другому человеку открыть известный адрес. Сложное имя файла также не является полноценным правом скачивания.

Согласуйте обход и директиву

Google поясняет работу noindex: чтобы робот обнаружил директиву, он должен иметь возможность получить соответствующий ответ. Одновременный запрет обхода может помешать увидеть новое правило. Это особенно важно при удалении уже известных поиску страниц.

Для кабинета приоритетом остаётся реальная авторизация. Не открывайте личные данные роботу ради noindex; настройте безопасный ответ и подходящую стратегию исключения. Robots не является списком секретов, который делает указанные пути защищёнными.

Проверяйте разные ответы

В Switch Pages приватные модульные маршруты получают no-store и X-Robots-Tag, а HTML-страницы формируют robots через SEO-настройки. Гостевой запрос и запрос владельца могут иметь разные статусы, поэтому проверяйте обе сессии.

Откройте исходный HTML и заголовки, а не только содержимое robots.txt. Убедитесь, что кэш не раздаёт персональную страницу другому пользователю. Для публичного поиска и фильтров продумайте индексирование отдельно. Согласованность механизмов важнее механического добавления всех возможных запретов: каждый отвечает за свою часть поведения и не отменяет проверки доступа к данным.

Продолжить работу

Проверьте HTTP-ответ и итоговый HTML своей страницы. Сопоставьте задачу с возможностями ядра. Другой материал этого раздела: Структура статей по намерению посетителя.