Директивы robots.txt не предназначены для деиндексации страниц сайта — Блог о самом интересном.
От автора: Джон Мюллер напомнил, что для удаления веб-страниц из поискового индекса Googlе следует использовать тег noundex, а не директивы файла robots.txt. Отвечая на вопросы вебмастеров, в своем твите Джон Мюллер напомнил, как нужно правильно осуществлять деиндексацию страниц сайта. Он […]
Читать далее →