COVID2019 и это вот все. Друзья, вся эта история начинает плохо пахнет. Мойте руки, не ходите в люди. Отложите все плановые покупки и положите в носок заначку. Заприте ваших родителей, бабушек-дедушек на даче. Лучше перебдеть чем недобдеть. Берегите себя!

Как закрыть сайт от индексации поисковыми системами?


Ratnik

Recommended Posts

Сайт в разработке и я не желаю, что бы поисковые системы индексировали страницы моего сайта.

Можно ли отключить индексации всего сайта сразу? Или надо в каждом товаре, каждой категории ставить поле индексация = выключено.

Если можно, то разжуйте пожалуйста для нуба по по пунктам, куда и что сделать.

И как потом включить индексацию, когда сайт будет готов!

Огромное спасибо!

Ссылка на комментарий
Поделиться на других сайтах

А всё что в нём есть оставить или удалить?

или прост в самое начало добавить эти строки и получим вот такой вид:

Скрытый текст

User-agent: *
Disallow: /
User-agent: *
Disallow: /*route=checkout/
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=

User-agent: Yandex
Disallow: /*route=checkout/
Disallow: /index.php?route=product/product*&manufacturer_id=
Disallow: /catalog
Disallow: /download
Disallow: /system
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Clean-param: tracking

Не могли бы Вы посмотреть правильно или нет? Спасибо!

Ссылка на комментарий
Поделиться на других сайтах

6 минут назад, RHCk сказал:

Тот robots.txt, который был установлен с движком, замените на новый, в котором две строки.

Как закончите магазиностроение, поменяете их обратно.

Оставьте две верхние строки, остальное удалите.

 

Просто смотреть смысла нет, нужно знать какие модули установлены и добавляют ли они страницы (как например фильтры), которые нужно закрыть от индексации.

И в вашем случае, если настроен SSL, не хватает директивы Host в секции для Яндекса.

Спасибо!

Про директиву Host я конечно не понял :), но пока не стану этим загружаться, как буду готов включить индексацию, тогда и буду вникать да разбираться.

Еще раз спасибо!

Ссылка на комментарий
Поделиться на других сайтах

Join the conversation

You can post now and register later. If you have an account, sign in now to post with your account.

Гость
Ответить в тему...

×   Вы вставили отформатированное содержимое.   Удалить форматирование

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

  • Сейчас на странице   0 пользователей

    • Нет пользователей, просматривающих эту страницу