Robots.txt и спец символы или как лучше?

Romantv

Новичок
Регистрация
27 Фев 2017
Сообщения
957
Реакции
358
Баллы
63
Короче делаю новый сайт.Заморочился с подборками поспешил наверно, может их потом снесу и сделаю подборки из тегов.
Сейчас решил сделать киностудии подборка киностудий.
И что бы не заморачиваться с категориями буду их делать из облака тегов,и тут проблема сайт новый фильмов мало если все теги открыть столько мусора будет индексироваться

Обратил на один момент вот например
17616-ddbdda682178c1f2369566d1be93abf3.png
17617-8b7ffab15d93e05d9d202554e5037952.png

Теги я сейчас буду закрывать от индекса в robots
А когда наберется например штук 20 новостей с этим тегом редактируешь его добавляешь еще один пробел и прописываешь там тайлы и все остальное
вот как правильно придумать robots
/tags/Марс+Медиа/ -------- Это закрыть с одним плюсом
/tags/Марс++Медиа/ --------- А этот открыть с двумя плюсами
Читаю и не могу сообразить как сделать yandex.ru/support/webmaster/controlling-robot/robots-txt.html
 

aeneas

Новичок
Регистрация
27 Фев 2017
Сообщения
2.974
Реакции
1.352
Баллы
113
нах ты так гемороишься ? )))
 

Romantv

Новичок
Регистрация
27 Фев 2017
Сообщения
957
Реакции
358
Баллы
63
нах ты так гемороишься ? )))
А как? решил если точка и слешь то не индексует /tags/Мостелефильм./ а как наберется штук 20 убераешь точку и она открыта.
serial-go.com melodrama1.com как пример на первом реклама директ и трафа 16-18к на втором раз в пять по больше трафа.

Disallow: /tags/*./

Screenshot_1.png
Запросы нч есть а конкурентов нет
 
Сверху Снизу