Редактирование Robots.txt

​Данный файл служит настройкой доступа поисковым роботам к нашему сайту для индексирования его страниц. В себе файл содержит инструкции в которых указано какие страницы и разделы сайт можно индексировать а какие нет, и соответственно каким поисковым роботам можно это делать.​

Если вы используете Рекомендуемый файл robots.txt, что по-умолчанию встроен в Ваш сайт, просмотреть его конфугурацию достаточно ввести в адресную строку браузера имявашегопроекта.bazium.com/robots.txt. 
Если же у Вас подключено доменное имя тогда так: вашдомен.ру/robots.txt, и на экране отобразиться стандартный robots.txt, 

вот так:

При использовании стандартного файла мы запрещаем всем поисковым роботам индексировать следующие страницы и разделы нашего сайта:


/product_cart - корзина
/standart-bloc - стандартные блоки
/payment-fa - страница “Оплата не удалась”
/payment-well-do - страница “Оплата удалась”
/cart-well-do - страница “Благодарим за покупку”


Если Вы желаете использовать собственный формат файла robots.txt, Вам нужно переключить флажок на функцию “Использовать собственный Robots.txt” и внести необходимые параметры индексации: