Запретить индексацию сайта

Когда вы работаете на сайте, который ещё не готов или является клоном другого, чтобы не кому не навредить из-за одинакового текста на сайтах, а также по многим другим причинам, вам следует запретить его индексацию. Для этого требуется:

1. Добавить мета тег, который запрещает индексацию сайта, поставьте его на всех страницах сайта в теге head., который запрещает индексацию сайта, поставьте его на всех страницах сайта в теге head.

<meta name="robots" content="noindex, nofollow"/>

2. Прописать в robots.txt или создать его, если отсутствует, в корне сайта и добавить туда следующее:

User-agent: *
Disallow: /

Вот теперь ваш сайт не индексируется и вы можете быть спокойны, что не кому не навредите этим.