Прежде чем задать вопрос, изучите раздел "Помощь". Там наверняка уже есть ответ.
1 2

Тема: правильный robots.txt для сайта на платформе nethouse

Автор Sergey, 17 нояб 2012
Сообщений в теме: 16
  1. Опытный

    Регистрация
    30.08.2012
    Сообщений
    43

    правильный robots.txt для сайта на платформе nethouse

    Подскажите пожалуйста как правильно оформить robots.txt для своего инет-магазина на нетхауз так, чтобы поисковые роботы не индексировали всякую ерунду.

  2. Опытный
    Регистрация
    19.10.2012
    Сообщений
    61
    Сообщение от Sergey:
    Подскажите пожалуйста как правильно оформить robots.txt для своего инет-магазина на нетхауз так, чтобы поисковые роботы не индексировали всякую ерунду.
    об этом миллионы раз писали на форуме, использовать поиск неужели так сложно?

    не советую работать с роботом тэкст, если не занете что там и как.

  3. Опытный
    Регистрация
    24.11.2012
    Сообщений
    33
    Сообщение от Наталка!:
    об этом миллионы раз писали на форуме, использовать поиск неужели так сложно?

    не советую работать с роботом тэкст, если не занете что там и как.
    Через поиск ничего полезного по этой теме не указано. Хватит умничать, это вполне адекватный вопрос, который не обсуждался на должном уровне.

  4. Опытный
    Регистрация
    24.11.2012
    Сообщений
    33
    Ну или ссылочку плиз если я слепой =)

  5. Профессионал

    Регистрация
    29.06.2012
    Сообщений
    35,574
    Сообщение от Sergey:
    Подскажите пожалуйста как правильно оформить robots.txt для своего инет-магазина на нетхауз так, чтобы поисковые роботы не индексировали всякую ерунду.
    А что в вашем понятии является ерундой? может просто нужно убрать ерунду с сайта?
    а вообше есть отличный сайт, посвященный robots.txt

  6. Опытный
    Регистрация
    24.11.2012
    Сообщений
    33
    В robots.txt обычно указывают пункты никак не относящиеся к контенту. Сейчас покажу robots.txt написанный для сайта на ворд пресс

    User-agent: Yandex
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /wp-trackback
    Disallow: /wp-feed
    Disallow: /wp-comments
    Disallow: */trackback
    Disallow: */feed
    Host: www.screw-spb.ru

    User-agent: *
    Disallow: /cgi-bin
    Disallow: /wp-admin
    Disallow: /wp-includes
    Disallow: /wp-content/plugins
    Disallow: /wp-content/cache
    Disallow: /wp-content/themes
    Disallow: /wp-trackback
    Disallow: /wp-feed
    Disallow: /wp-comments
    Disallow: */trackback
    Disallow: */feed

    Sitemap: http://screw-spb.ru/sitemap.xml

    Правильный robots.txt значительно ускоряет процесс индексации поисковым роботом.

    Я присоединяюсь к ТС.

  7. Опытный

    Регистрация
    28.10.2012
    Сообщений
    80
    да напишите просто
    User-agent: *
    Disallow: /

    и будет вам счастье)

  8. Профессионал

    Регистрация
    29.06.2012
    Сообщений
    35,574
    Сообщение от milasha:
    да напишите просто
    User-agent: *
    Disallow: /

    и будет вам счастье)
    данное правило запретит индексацию сайта полностью
    Последний раз редактировалось support; 26.05.2013 в 16:25.

  9. Опытный

    Регистрация
    28.10.2012
    Сообщений
    80
    Сообщение от kobzarik:
    ага
    )))) да уж
    Последний раз редактировалось milasha; 26.11.2012 в 14:23.

  10. Новичок
    Регистрация
    11.01.2013
    Сообщений
    1
    Сообщение от milasha:
    да напишите просто
    User-agent: *
    Disallow: /

    и будет вам счастье)
    на сколько я знаю это закрывает от индексации, или я ошибаюсь, или я не понял шутку..

1 2
Сейчас посетителей: 1. Пользователей: 0, гостей: 1 Рекорд одновременного пребывания 1, это было 17.10.2019 в 11:36.
Сообщений
16
Пользователи
35,118
Активные участники
345

Приветствуем нового пользователя, CameronEpr