как правильно закрыть допполя в robots

[aeneas]

в robots.txt надо правильно сделать такое -
Allow: /xfsearch/year/
Disallow: /xfsearch/

т.е. надо чтобы допполя с годом индексировались остальное нет
как правильно должно быть прописано ? не разбираюсь нихрена
например выше сделал по аналогии с другим, это правильно ?

и еще, я хаком убрал xfsearch с ссылок, т.е. год у меня доступен по двум адресам -
/xfsearch/year/ и /year/
хак этот
http://seopirat.club/threads/xak-izbavljaemsja-ot-xfsearch-dle-11-0-i-vyshe.91/
так вот - если год разрешить к индексации получиться дуликат категории же
как и это устранить

донботом не выйдет потому что с ним закрывается год в ноиндекс даже если хак используешь

итого надо - чтобы так было открыто к индексации /year/ а все остальные допполя запрет
спасибо ))

 

[yuragan]

в robots.txt надо правильно сделать такое -
Allow: /xfsearch/year/
Disallow: /xfsearch/

т.е. надо чтобы допполя с годом индексировались остальное нет
как правильно должно быть прописано ? не разбираюсь нихрена
например выше сделал по аналогии с другим, это правильно ?

и еще, я хаком убрал xfsearch с ссылок, т.е. год у меня доступен по двум адресам -
/xfsearch/year/ и /year/
хак этот
http://seopirat.club/threads/xak-izbavljaemsja-ot-xfsearch-dle-11-0-i-vyshe.91/
так вот - если год разрешить к индексации получиться дуликат категории же
как и это устранить

донботом не выйдет потому что с ним закрывается год в ноиндекс даже если хак используешь

итого надо - чтобы так было открыто к индексации /year/ а все остальные допполя запрет
спасибо ))

не так
Disallow: /xfsearch/
Allow: /xfsearch/year (для страницы,для каталога в конце /)

 

[aeneas]

не так
Disallow: /xfsearch/
Allow: /xfsearch/year (для страницы,для каталога в конце /)

где то читал давно, что Allow должен быть выше Disallow

 

[yuragan]

хз, но считаю обрабатываться должна сначала папка верхнего уровня, а потом все что в ней... в твоем случае можно прочитать: разрешить для индексации папку год,но запретить папку поиск,т.е. ты запрещаешь последней строкой всю папку,соответственно и год запретишь.
в моем случае: запретить папку поиск, но разрешить в ней папку год..как то так

 

[yuragan]

где то читал давно, что Allow должен быть выше Disallow

можно еще так попробовать
Allow: /year
Disallow: /xfsearch/

запретить индексирование папки xfsearch, кроме любых страниц начинающихся с year.

или так

Allow: /year
Disallow: /xfsearch

запретить индексирование любых страниц начинающихся с xfsearch, но разрешить любые страницы начинающиеся с year.

 

[PunPun]

Allow: /xfsearch/year/
Allow: /xfsearch/year/page/*/
Disallow: /xfsearch/*

 

[aeneas]

Allow: /xfsearch/year/
Allow: /xfsearch/year/page/*/
Disallow: /xfsearch/*

спс