Как запретить индексацию домена в Cloudflare

О чем материал ?

Сегодня мы обсудим небольшое решение, которое поможет некоторым пользователям. Особенно будет полезно тем, что переехали с старого домена на новый, сайт переиндексировался и нужно закрыть индексацию старого домена, который добавлен в Cloudflare.

Да, суть этого решения в том, что например на сайте uCoz у вас прикреплены несколько доменов, файлом robots.txt вы имеете возможность управлять лишь для основного домена. То есть даже если новый проиндексировался и вес старого домена давно переехал на новый, вы корректно закрыть индекс старого не можете.

В этой статье мы предлагаем простое решение, которое позволит закрыть этот вопрос.

Как запретить индексацию домена в Cloudflare ?

Для настройки запрета мы не будем работать с файлом robots.txt, мы лишь настроим запрет доступа поисковым ботам к сайту. В результате домен перестанет далее индексироваться и так мы решим наш вопрос.

Как закрыть доступ ботам поисковых систем к сайту ?

Перейдите в кабинет Cloudflare, выберите свой сайт с списка доступных, далее перейти в раздел Security - WAF, далее выбираем пункт Create firewall rule, и создаем правило для запрета:

1. Rule name (required) - пропишите название для правила какое хотите.
2. Field, выбрать Known Bots.
3. Choose an action (Required), выбрать Block.
4. Сохраняем правило нажав на кнопку Deploy firewall rule.

Далее спустя сутки можно посмотреть результаты работы правила:

Примечание

Важно! Этот способ не всем пригодится и я это понимаю. Но если кто будет в такой ситуации как описано в статье, это будет решением, а использовать его или нет, принимать решение вам.