Подскажите robots для WP

[uchiha]

Подскажите robots для WP

Совсем запуталась в поиске оптимального роботс для вордпресс. Судя по тому, что нагуглила собираюсь остановиться на варианте:
=============================================
User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?utm_source
Host: сайт.ком

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?utm_source

Sitemap:

Тільки зареєстровані користувачі бачать весь контент у цьому розділі

сайт.ком/sitemap.xml
==============================================

Это тот что стоит нынче

Тільки зареєстровані користувачі бачать весь контент у цьому розділі

Поправьте, либо посоветуйте решение оптимальнее.

 

[Rulaf]

Зачем для яндекса делать отдельные записи? Ради директивы Host?

 

[uchiha]

Да вот судя по советам, все роботы согласны кушать User-agent: * кроме Яндекса, для него почему-то советуют отдельно писать весь список не индексируемого.
Потому, собсно и вопрошаю о корректности роботс.тхт.
Кстати, дериктива хост встречается в любом месте роботс файла, так что- к каким роботам она относится и на что влияет - хз.(хотя, возможно, просто неграмотно написаны роботсы)

 

[Rulaf]

Да вот судя по советам, все роботы согласны кушать User-agent: * кроме Яндекса, для него почему-то советуют отдельно писать весь список не индексируемого.

Что за бред?

Можно вполне писать так:

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Disallow: /*?utm_source
Host: сайт.ком
Sitemap:

Тільки зареєстровані користувачі бачать весь контент у цьому розділі

сайт.ком/sitemap.xml

В сервисах Google и Яндекс вебмастер есть проверка файла robotst.txt

Вот справочная информация:

Тільки зареєстровані користувачі бачать весь контент у цьому розділі

 

[uchiha]

Окей, пасиба за консультацию=)
в host калякать
www. сайт.com
или
сайт.com ?

 

[Rulaf]

Окей, пасиба за консультацию=)
в host калякать
www. сайт.com
или
сайт.com ?

я предпочитаю - сайт.com, но если поисковики уже проиндексировали с www, тогда в host -

Тільки зареєстровані користувачі бачать весь контент у цьому розділі

 

[GerSer]

Мой вариант

User-agent: *
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /comments

User-agent: Yandex
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /webstat/
Disallow: /feed/
Disallow: /trackback
Disallow: */trackback
Disallow: */feed
Disallow: /*?*
Disallow: /*?
Disallow: /wp-content/
Disallow: /wp-admin/
Disallow: /wp-includes/
Host: site.ru

Sitemap: [URL]https://site.ru/sitemap.xml[/URL]

 

[uchiha]

Значит слухи о том, что Яндекс не такой как все, не так уж и беспочвенны, как я погляжу.
Спасибо за ответы. Если есть еще варианты - делитесь =)



Подскажите пожалуйста, ежели распологаете информацией, плагин с виджетом для курса валют и конвертацией валют (чтоб гривна была естественно)