Когда можно начинать продвижение своего сайта

[viktorcons]

вот
#Будьте внимательны при изменении robots.txt!!!
#Правила внесенные вами могут снизить позицию Вашего сайта в поисковиках.

User-agent: *
Allow: /
Host: dveri-alexfor.ru
Sitemap: http://dveri-alexfor.ru/sitemap.xml
Disallow: /products/3812595

[Pro.Nethouse]

вот
#Будьте внимательны при изменении robots.txt!!!
#Правила внесенные вами могут снизить позицию Вашего сайта в поисковиках.

User-agent: *
Allow: /
Host: dveri-alexfor.ru
Sitemap: http://dveri-alexfor.ru/sitemap.xml
Disallow: /products/3812595

Нет, вот так:

User-agent: *
Allow: /
Disallow: /products/3812595


User-agent: Yandex
Allow: /
Disallow: /products/3812595
Host: dveri-alexfor.ru
Sitemap: http://dveri-alexfor.ru/sitemap.xml

P.S. на всякий случай для яндекса еще отдельное правил прописала, чтобы уж наверняка

[viktorcons]

спасибо, я оба правила ставлю в робот?

[Pro.Nethouse]

спасибо, я оба правила ставлю в робот?

да, прямо отсюда копируете полностью.

[Евгения101973]

Скажите пожалуйста уважаемый модератор, а как новичку прописать в роботе, я ничего в этом не понимаю, у меня сайт
http://kukolnydom.ru/

[topman]

Скажите пожалуйста уважаемый модератор, а как новичку прописать в роботе, я ничего в этом не понимаю, у меня сайт
http://kukolnydom.ru/

Приветствую, Евгения. У Вас в robots.txt должно быть так:

User-agent: *
Allow: /
Host: kukolnydom.ru

Sitemap: http://kukolnydom.ru/sitemap.xml

.

[Михаил82]

Всем привет! Проверьте пожалуйста, правильно ли я поставил исключения для индексации?
User-agent: *
Allow: /
Disallow: /page/soglashenie-pri-zakaze

User-agent: Yandex
Allow: /
Disallow: /page/soglashenie-pri-zakaze
Host: karavan-market.ru
Sitemap: http://karavan-market.ru/sitemap.xml

[Pro.Nethouse]

Всем привет! Проверьте пожалуйста, правильно ли я поставил исключения для индексации?
User-agent: *
Allow: /
Disallow: /page/soglashenie-pri-zakaze


User-agent: Yandex
Allow: /
Disallow: /page/soglashenie-pri-zakaze
Host: karavan-market.ru
Sitemap: http://karavan-market.ru/sitemap.xml

Здравствуйте, почти URL некорректно внесли, а так структура верная. Вот правильный вариант:

User-agent: *
Allow: /
Disallow: /soglashenie-pri-zakaze


User-agent: Yandex
Allow: /
Disallow: /soglashenie-pri-zakaze
Host: karavan-market.ru
Sitemap: http://karavan-market.ru/sitemap.xml

[Михаил82]

Благодарю за помощь! А если несколько исключений, так правильно будет?
User-agent: *
Allow: /
Disallow: /soglashenie-pri-zakaze
Disallow: /delivery
Disallow: /payment

User-agent: Yandex
Allow: /
Disallow: /soglashenie-pri-zakaze
Disallow: /delivery
Disallow: /payment
Host: karavan-market.ru
Sitemap: http://karavan-market.ru/sitemap.xml

[Pro.Nethouse]

Благодарю за помощь! А если несколько исключений, так правильно будет?
User-agent: *
Allow: /
Disallow: /soglashenie-pri-zakaze
Disallow: /delivery
Disallow: /payment


User-agent: Yandex
Allow: /
Disallow: /soglashenie-pri-zakaze
Disallow: /delivery
Disallow: /payment
Host: karavan-market.ru
Sitemap: http://karavan-market.ru/sitemap.xml

Да, все верно