Защита вашего сайта от индексации: правильные способы
Мы говорили об этом в 2009-м, и говорим об этом сейчас: удивительно, но до сих пор есть люди, которые используют для защиты своего сайта от индексации в Google или Bing только файл robots.txt. И в итоге их сайт все равно попадает в выдачу поисковиков. Знаете, почему это нас удивляет? Потому что robots.txt вообще не защищает от попадания в выдачу, хотя и препятствует индексации. Давайте в я объясню вам, как это работает.