Вопрос по robots.txt

[alniz]

Добрый вечер, уважаемые форумчане, как сформировать файл robots.txt для яндекс вебмастера?

[RHCk]

13 часа назад, alniz сказал:

как сформировать файл robots.txt

1. Новый вопрос - новая тема, не нужно дописывать свои вопросы в чужую тему (исключение темы поддержки). Тем более если тема никак не связана с вашим вопросом.

2. Изначально достаточно того robots.txt, который идёт со сборкой. При установке доп. модулей (например фильтр), необходимо добавить туда страницы фильтра, дабы они не попали в индекс ПСов. Посмотреть страницы, которые не закрыты в robots.txt от индексации можно с помощью XENU или Screaming Frog SEO Spider.

[casso]

Добрый день.
Заранее прошу прощения если пишу не в ту тему. Но я уже в отчаянии.
Собственно о проблеме, при написании названия сайта, гугл в результате поиска выдает 


В Search Console в разделе Файлы Sitemap мне говорят что: Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.
Но, беру любую ссылку которую якобы не индексирует из за robots.txt и проверяя  в инструменте проверки файла robots.txt, пишет зеленым - ДОСТУПЕН.
Ну вот как с этим жить без пистолета??

Сайту полторы недели. После создания закрывал от индексации, командой
User-agent: *
Disallow: /
вчера утром открыл и захотелось схватится за пистолет которого у меня увы нету.

Мой robots.txt

Скрытый текст

Мой robots.txt

User-agent: *
Disallow: /*route=checkout/
Disallow: /system
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Disallow: /*?tracking=
Disallow: /*&tracking=

User-agent: Yandex
Disallow: /*route=checkout/
Disallow: /system
Disallow: /*?order=
Disallow: /*&order=
Disallow: /*?filter_name=
Disallow: /*&filter_name=
Disallow: /*?filter_sub_category=
Disallow: /*&filter_sub_category=
Disallow: /*?filter_description=
Disallow: /*&filter_description=
Clean-param: tracking
Host: www.casso.ua
Sitemap: http://www.casso.ua/sitemap.xml

 

[RHCk]

2 часа назад, casso сказал:

вчера утром открыл

Процесс индексации страниц не мгновенный.

У Гугла до недели, у Яндекса минимум недели две, на меньшее не рассчитывайте.

 

P.S. Если будете одно и то же в разных темах писать, пополните ряды читателей.

[casso]

Но как оно тогда его проиндексирует если пишет? - Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt.