Правильный robots.txt

SEO требуют, чтобы в поиск яндекса не попадали служебные страницы, результаты поиска и прочее, особенно если у вас много товаров и нет необходимости лишних страниц в ПС

Вот пример хорошего robots.txt, который вы можете отредактировать в ADM - Сайт - Правка robots.txt

User-agent: *
Allow: /index.php
Allow: /index.php?catid=
Allow: /index.php?pubid=
Allow: /index.php?pub=
Allow: /index.php?catalog=

Allow: /index.php?item_id=
Allow: /index.php?page=
Allow: /sitemap.php

Disallow: /*unifid
Disallow: /*query=
Disallow: /*jstart=
Disallow: /*z=
Disallow: /*site_type=

Disallow: /*bb=
Disallow: /index.php?*&mpol=*
Disallow: /index.php?ltype*
Disallow: /index.php?way*
Disallow: /index.php?sorting*
Disallow: /index.php/
Disallow: /index.php?action=view_baskets
Disallow: /admin/
Disallow: /minichat.php
Disallow: /js.php
Disallow: /jsbask.php
Disallow: /ib.php
Disallow: /index.php?zapros=
Disallow: /index.php?logout=
Disallow: /index.php?register=
Disallow: /index.php?login=
Disallow: /yml.php
Disallow: /mgxml.php
Disallow: /cesxml.php
Disallow: /gxml.php
Disallow: /print.php
Disallow: /index.php?action=gal
Disallow: /index.php?action=cl
Disallow: /index.php?action=price

Disallow: /chat.php?ch=main*
Disallow: /index.php?action=arch
Disallow: /message.php

Disallow: /callback.php
Disallow: /emoji.php
Disallow: /chat.php
Disallow: /order.php
Disallow: /icons.php
Disallow: /icon.php

Disallow: /privacy.php
Disallow: /index.php?query=

Disallow: /index.php?catid=&query=
Disallow: /index.php?unifid=
Host: ВАШСАЙТ.ru

comments powered by Disqus