Как удалить страницы из индекса Google и Яндекса
Как выбрать постоянное удаление, noindex или временное скрытие. Различия инструментов Google и Яндекса, учебная таблица URL и контроль после обхода.
Чтобы удалить страницу из поиска, сначала решите, что должно происходить с самой страницей. Удалённому материалу нужен корректный ответ сервера, доступному посетителям материалу — запрет индексирования, конфиденциальной информации — ограничение доступа. Временное скрытие результата в поисковой панели не заменяет постоянную настройку.
Проверяйте Google и Яндекс отдельно. Их инструменты и обработка robots.txt различаются; одинаковый статус в одной панели не доказывает завершение в другой.
Дерево решений по цели
| Цель | Постоянное состояние | Дополнительное действие |
|---|---|---|
| Материал удалён без замены | 404 или 410 | Убрать из карты сайта и актуальных ссылок |
| Тот же материал переехал | Релевантный редирект на новый адрес | Проверить конечную страницу |
| Посетителям нужен, в поиске не нужен | Доступный роботу noindex | Дождаться чтения директивы |
| Данные должны быть приватными | Авторизация или удаление содержимого | Проверить гостевой доступ и копии |
| Срочно скрыть результат Google | Временный запрос Removals | Параллельно настроить постоянное состояние |
Не направляйте все исчезнувшие товары на главную. Перенаправление оправдано при действительно подходящей замене; иначе оно вводит человека в заблуждение. Временно отсутствующий товар часто следует оставить доступным, что отдельно разобрано в карточке без наличия.
Google: временный запрос и постоянное исключение
В Search Console инструмент Removals позволяет временно скрыть результат; запрос действует примерно шесть месяцев. За это время нужно довести постоянное решение: удалить содержимое, ограничить доступ или отдать noindex. После окончания временного запроса доступная для индексирования страница может вернуться.
Для чтения noindex Googlebot должен иметь доступ к странице. Если закрыть её в robots.txt, робот может не увидеть директиву. Сам Disallow не считается надёжным способом удалить URL из результатов Google. Подробности файла разобраны в robots.txt магазина.
Яндекс: сначала условие удаления
В Яндекс Вебмастере сначала обеспечьте предусмотренное условие: удалённая страница отдаёт подходящий статус, либо нужная посетителям страница содержит noindex. При noindex оставьте доступ для робота. В инструменте удаления отдельных URL можно сообщить адрес и затем наблюдать очередь, процесс, результат или отклонение заявки.
Для удалённого с сайта URL справка Яндекса рекомендует Disallow вместе с подходящим ответом сервера. Если вы используете этот путь, ограничьте правило адресно для робота Яндекса и проверьте, что оно не мешает обработке сигналов Google. В учебном /product/old остаётся ответ 410; для ускорения удаления в Яндексе отдельно добавляется предусмотренный его процедурой запрет. Это отличается от /preview: доступную noindex-страницу блокировать от обхода нельзя.
Для группового удаления по префиксу справка Яндекса отдельно требует Disallow для соответствующих адресов. Это специальный путь инструмента, а не универсальная инструкция одновременно закрыть страницу и заставить робота прочесть noindex. Слишком широкий префикс может затронуть полезный раздел; перед отправкой выпишите весь охват правила.
Яндекс описывает удаление и по robots.txt, но допускает повторное появление адреса при внешних ссылках. Не переносите это поведение на Google и не используйте поисковый запрет для защиты данных. Авторизация решает доступ, noindex — участие в поиске.
Учебная таблица четырёх адресов
Для вымышленного магазина составьте план до изменений:
| Адрес | Задача | Решение и проверка |
|---|---|---|
| /product/old | Товар окончательно снят, замены нет | 410; проверить фактический ответ по этому адресу |
| /product/new-name | Товар переименован | 301 на новую карточку того же товара, конечный 200 |
| /preview | Публичное превью нужно посетителям | noindex при доступном обходе, проверка после посещения роботом |
| /staff-price | Внутренний прайс | Авторизация, без гостевого доступа и публичных копий |
Затем заведите отдельные колонки состояния Google и Яндекса. Для срочного скрытия публичного превью в Google добавьте Removals, сохранив noindex. Для Яндекса используйте подходящий путь по URL и проверяйте причину принятия или отклонения; не подменяйте его шестимесячным механизмом Google.
Проверьте варианты адреса: регистр, параметры, старые URL, протоколы и доступные копии. Удаление одной версии не доказывает, что чувствительное содержимое больше нигде не доступно. Сканирование и поисковое скрытие также не удаляют сохранённые кем-то копии вне вашего сайта.
Как подтвердить результат и вернуть страницу
Проверьте ответ сервера и директиву в опубликованной версии, доступ робота и отчёт проверки конкретного URL. После нового обхода убедитесь, что причина исключения соответствует плану. Отсутствие в выдаче по одному запросу или site-поиск — недостаточная проверка индекса.
Чтобы вернуть материал, восстановите нужный ответ и содержимое, снимите noindex или запрет, отмените применимый временный запрос и сообщите об обновлении. Возврат после обхода не гарантирует прежних позиций. Настройку переноса продолжает гайд по редиректам.