robots

  1. aklex1

    Robots.txt для вордпресс (wordpress)

    Что нужно впервую очередь сделать на сайте? правильно - закрыть от индексации ненужные разделы и дублирующиеся элементы - теги, метки и прочие. Для этого после создания сайта сразу пропишите настройки для robots.txt который лежать должен в корне сайта. Вы можете дополнять стандартный набор...
  2. L

    Ошибка! robots.txt содержит html-теги!

    проверил свой сайт тут http://www.dinews.ru/seo/?h=774c&url=http%3A%2F%2Fpornofab.epizy.com&yaca=1 и пишет ошибку : Ошибка! robots.txt содержит html-теги! .Подскажите что делать ?
Сверху Снизу