Robots.txt создание и редактирование

Robots.txt создание и редактирование

Как в конструкторе сайтов правильно настроить указания для поисковиков специальным файлом robots.txt

 

 

Файл robots.txt расположен в корневой папке вашего сайта. Он необходим для того, чтобы указывать поисковому роботу, какие страницы сайта можно включать либо не включать в индекс.


С помощью robots.txt можно с легкостью закрыть индексацию любой страницы. 
Кроме того в файле robots.txt нужно указывать основной хост (адрес) Вашего сайта и адрес актуальной карты sitemap.xml


Теперь кратко о настройке этого файла на Конструкторе сайтов Собери Сайт.


1. На главной странице панели администрирования нажимаем на кнопку "ROBOTS.TXT"

настройка robots.txt

2. В открывшемся окне редактируем содержимое согласно Вашим потребностям

- Вводим главный адрес сайта (Строка Host)

- Вводим адрес карты sitemap.xml

- Задаем какие страницы должны индексироваться, а какие закрываем от индексации параметром "Disallow:"

настройка robots.txt



3. Сохраняем изменения кликнув на соответствующую кнопку

настройка robots.txt



4. Проверить результат можно дописав в адресной строке браузера к окончанию названия Вашего сайта "/robots.txt" и нажав клавишу "ENTER" на клавиатуре.

настройка robots.txt




Конструктор сайтов позволяет без каких-либо усилий производить настройку специальных служебных функций, которые помогут качественно продвигать сайт и раскручивать его в поисковых системах. 

 

 

 

Возможности
Бесплатные возможности конструктора
Бесплатные возможности конструктора

В данном разделе мы представляем Вам тот функционал конструктора сайтов, который предоставляется абсолютно бесплатно и без каких бы то ни было дополнительных условий.

Дополнительные услуги компании
Дополнительные услуги компании

В этом разделе представлены различные услуги, не связанные с конструктором сайтов. Примерами таких услуг являются создание сайта или лендинга, раскрутка в сети, рассылки писем и прочие

Быстрый вывод в ТОП 10

Конструктор сайтов «Собери Сайт» имеет все известные SEO-инструменты. Начиная с ключевых слов и заканчивая разметкой структурированных данных. Это позволяет быстро выводить его в ТОП

X

ЗАПРОС СТОИМОСТИ


*Если Вы не робот, ответьте на вопрос:
Сколько будет семь минус три (ответ цифрами)
* обязательные поля

Нажимая кнопку "ОТПРАВИТЬ" даю согласие на получение писем и на обработку персональных данных

X

Оставьте свой отзыв

*Если Вы не робот, ответьте на вопрос:
Два жирафа минус самолет. Сколько животных осталось? (поставьте цифру)
 * обязательны для заполнения.
Закрыть окно

Задайте Ваш вопрос

*Если Вы не робот, ответьте на вопрос:
8 минус 3 (ответ цифрами)
 * обязательны для заполнения.