Прежде чем задать вопрос, изучите раздел "Помощь". Там наверняка уже есть ответ.
1 ... 3 4 5 6 7

Тема: Как правильно составить Roots.txt

Автор ksemen, 05 дек 2016
Сообщений в теме: 67
  1. Новичок Valentine is on a distinguished road
    Регистрация
    14.05.2017
    Сообщений
    7
    Сообщение от Svet7:
    Здравствуйте!
    Попробуйте на одном товаре и проверьте в вебмастере Инструменты - анализ robots.txt - Разрешены ли URL?
    Вставить все урлы в https://webmaster.yandex.ru/tools/robotstxt/, проверить, правильно ли все прописано (какой ответ будет).
    Svet7, создал два тестовых товара.
    ЧПУ сделал not-tovar1 и not-tovar2
    добавил в робота Disallow: /not

    Результат проверки:

    URL mypostland.ru/products/not-tovar1
    /products/not (красным)
    URL mypostland.ru/products/not-tovar2
    /products/not (красным)

    Головой понимаю, что страницы не индексируются, но, блин, стал параноиком с этим СЕО,
    поэтому прошу уточнить Вас, все правильно понял? ))))
    Нажмите на изображение для увеличения
Название: not.jpg
Просмотров: 0
Размер:	32.0 Кб
ID:	14915

  2. Профессионал Svet7 is on a distinguished road

    Регистрация
    17.11.2014
    Сообщений
    10,257
    Сообщение от Valentine:
    Svet7, создал два тестовых товара.
    ЧПУ сделал not-tovar1 и not-tovar2
    добавил в робота Disallow: /not

    Результат проверки:

    URL mypostland.ru/products/not-tovar1
    /products/not (красным)
    URL mypostland.ru/products/not-tovar2
    /products/not (красным)

    Головой понимаю, что страницы не индексируются, но, блин, стал параноиком с этим СЕО,
    поэтому прошу уточнить Вас, все правильно понял? ))))
    Вложение 14915
    Проверьте урл mypostland.ru/products с незакрытым товаром (этот же товар, но не дубль), если будет "зеленая галочка", то верно все.
    Попробуйте такую директиву закрытия:
    Disallow: /*not
    Если "not" больше нигде не используется на других страницах сайта (текстовые например).

  3. Новичок Valentine is on a distinguished road
    Регистрация
    14.05.2017
    Сообщений
    7
    Сообщение от Svet7:
    Проверьте урл mypostland.ru/products с незакрытым товаром (этот же товар, но не дубль), если будет "зеленая галочка", то верно все.
    Попробуйте такую директиву закрытия:
    Disallow: /*not
    Вот что вышло:
    URL mypostland.ru/products/tovar1
    Результат ✓
    URL mypostland.ru/products/not-tovar1
    Результат /products/not
    URL mypostland.ru/products/not2-tovar1
    Результат /products/not

    Ура! Получается, правило Disallow/ :not блокирует и not1, и not 2, и not..n, но не блокирует основной товар.
    Думаю, многим это будет полезно на данном этапе развития Нетхауса.

    Спасибо Вам большое, Svet7!

  4. Профессионал Svet7 is on a distinguished road

    Регистрация
    17.11.2014
    Сообщений
    10,257
    Сообщение от Valentine:
    Вот что вышло:
    URL mypostland.ru/products/tovar1
    Результат ✓
    URL mypostland.ru/products/not-tovar1
    Результат /products/not
    URL mypostland.ru/products/not2-tovar1
    Результат /products/not

    Ура! Получается, правило Disallow/ :not блокирует и not1, и not 2, и not..n, но не блокирует основной товар.
    Думаю, многим это будет полезно на данном этапе развития Нетхауса.

    Спасибо Вам большое, Svet7!
    Обратите внимание, что ЧПУ есть так же у текстовых страниц. Если будете использовать на какой-то из страниц "not", то страница может оказаться закрытой для индексации. Просто для себя пометку сделайте, что бы случайно не забыть или не используйте подобное сочетание в названиях страниц, которые закрывать не хотите.

  5. Профессионал pavv77 is on a distinguished road

    Регистрация
    26.02.2014
    Сообщений
    108
    Подскажите пожалуйста, как закрыть от индексации фильтры?
    пример https://12chasov.ru/products/categor...f16c4770a%5D=1

  6. Профессионал Svet7 is on a distinguished road

    Регистрация
    17.11.2014
    Сообщений
    10,257
    Сообщение от pavv77:
    Подскажите пожалуйста, как закрыть от индексации фильтры?
    пример https://12chasov.ru/products/categor...e=1&attributes[u24981][57d2f16c4770a]=1
    Здравствуйте!
    Добавьте стоку Disallow: /*productGroup*
    productGroup - есть в сортировке/фильтре

    User-agent: *
    Allow: /
    Disallow: /*productGroup*
    Host: https://12chasov.ru
    Sitemap: https://12chasov.ru/sitemap.xml

    Чтобы проверить, как работает правило, перейдите в вебмастер, в раздел Инструмент проверки файла robots.txt, укажите конкретный url и увидите, как работает правило.

  7. Профессионал pavv77 is on a distinguished road

    Регистрация
    26.02.2014
    Сообщений
    108
    Спасибо Вам!

  8. Профессионал kokon is on a distinguished road

    Регистрация
    09.05.2013
    Сообщений
    3,482
    ребят, а как вы смотрите на такую диррективу, корректно ли у нас сработает?

    Clean-param: ga&openstat

    хочу убрать из индекса, зачем они там нужны...
    https://b1ser.ru/?_ga=1.219520537.1830745897.1430979823
    https://b1ser.ru/products/spinner2?_...dex.ru/partner

  9. Профессионал kokon is on a distinguished road

    Регистрация
    09.05.2013
    Сообщений
    3,482
    кстати, а почему вот так не работает ?

    https://b1ser.ru/products/viewcart - все норм, в индексе )
    Disallow: /viewcart

  10. Профессионал Svet7 is on a distinguished road

    Регистрация
    17.11.2014
    Сообщений
    10,257
    Сообщение от kokon:
    ребят, а как вы смотрите на такую диррективу, корректно ли у нас сработает?

    Clean-param: ga&openstat

    хочу убрать из индекса, зачем они там нужны...
    https://b1ser.ru/?_ga=1.219520537.1830745897.1430979823
    https://b1ser.ru/products/spinner2?_...dex.ru/partner
    Здравствуйте!
    Какие именно сложности возникают с подобными страницами?
    Скриншоты с Вебмастера можете приложить?

1 ... 3 4 5 6 7
Сейчас посетителей: 1. Пользователей: 0, гостей: 1 Рекорд одновременного пребывания 1, это было 28.11.2021 в 09:38.
Сообщений
67
Пользователи
36,117
Активные участники
54

Приветствуем нового пользователя, qsz66265