Прежде чем задать вопрос, изучите раздел "Помощь". Там наверняка уже есть ответ.
1 2

Тема: Robot.txt

Автор Undead, 12 окт 2012
Сообщений в теме: 16
  1. Новичок
    Регистрация
    11.10.2012
    Сообщений
    25

    Robot.txt

    Как добавить в файлы сайта Robot.txt?

  2. Administrator

    Регистрация
    27.06.2012
    Сообщений
    7,032
    Сообщение от Undead:
    Как добавить в файлы сайта Robot.txt?
    Он генерируется автоматически.

  3. Новичок
    Регистрация
    11.10.2012
    Сообщений
    25
    тоесть он уже есть на сайте?

  4. Профессионал

    Регистрация
    29.06.2012
    Сообщений
    35,574
    а ты проверь, вбей адрес сайта/robots.txt и увидишь))

  5. Профессионал

    Регистрация
    29.06.2012
    Сообщений
    35,574
    если оставите так, то сайт будет индексироваться весь. Можете что то закрывать, если есть необходимость, можете так оставить

  6. Профессионал

    Регистрация
    01.12.2012
    Сообщений
    640
    а тут принцепи и закрывать не чего))

  7. Новичок
    Регистрация
    06.04.2013
    Сообщений
    6
    Добрый день! Возник вопрос: у нас в каталоге к каждому товару идет повторяющееся описание. Нужно ли вписывать в robot.txt запрет на страницы с описаниями, чтобы Яндекс не счел их за плагиат и не забанил сайт, или этого не произойдет и можно запрет не ставить?

  8. Профессионал

    Регистрация
    29.06.2012
    Сообщений
    35,574
    не нужно закрывать, ПСы понимают, что в ИМ могут повторяться описания.
    естественно в основной индекс они вряд ли попадут, но мешать продвижению не будут

  9. Новичок
    Регистрация
    06.04.2013
    Сообщений
    6
    Спасибо большое за оперативность))

  10. Новичок
    Регистрация
    06.04.2013
    Сообщений
    6
    Да, кстати, описания не оригинальные, скопированные с других сайтов, т. к. товар одтнотипный. Робот пропустит?

1 2
Сейчас посетителей: 1. Пользователей: 0, гостей: 1 Рекорд одновременного пребывания 1, это было 18.10.2019 в 21:23.
Сообщений
16
Пользователи
35,124
Активные участники
340

Приветствуем нового пользователя, Sibyagoda54.ru