Содержание:
- Что такое зеркало сайта?
- Как проверить прописан ли Host в robots.txt?
- Как прописать Host в файле robots.txt?
Директива Host – это параметр в robots.txt, который отвечает за то, какой адрес сайта поисковому роботу считать главным зеркалом. Используется в основном для краулера от Яндекс.
Что такое зеркало сайта?
Зеркало – это копия сайта, доступная по-другому URL-адресу. Например, если по адресам www.site.ru и site.ru находится один и тот же сайт с одинаковым контентом, то они являются зеркалами друг друга.
Как проверить прописан ли Host в robots.txt?
Для проверки директивы Host необходимо перейти по адресу «site.ru/robots.txt», где «site.ru» - домен Вашего сайта:
Как прописать Host в файле robots.txt?
1. Зайдите на хостинг сайта или FTP-сервер и найдите файл «robots.txt» в папке «public_html»:
Внимание! Файл может находиться в другой папке – если у Вас не получается его найти, то обратитесь к программисту.
2. Скачайте файл на компьютер и откройте его:
3. Добавьте в файл строчку «Host: https://site.ru» и сохраните файл:
Внимание! Адрес директивы у Вас может отличаться в зависимости от используемого протокола на сайте. О том, как перевести сайт с протокола HTPP на HTTPS мы рассказывали в этой инструкции.
4. Загрузите файл обратно на хостинг или FTP-сервер:
5. Проверить добавление директивы можно по адресу «site.ru/robots.txt»:
Поздравляем! Вы добавили директиву Host в robots.txt!
Спасибо, что дочитали до конца. Переходите к следующей инструкции.
