«Самый надежный компас на жизненном пути – цель»

Цель - Создание сайта

Установить на сайт робот txt

Скачать  Чек лист № 14             Перейти по ссылке    Кнопка скачать

robots.txt  - Основа  продвижения и взаимодействия сайта с поисковыми машинами. Обычный текстовый файл , который размещается в корневой директории сайта.robots txt

В нём записаны  инструкции и рекомендации поисковым роботам.  Принимаем по факту о важности такого файла и переводом каждой строчки инструкции заниматься не будем.

Робот - анализирует сайт, записывает и хранит адресные ссылки на все записи, рисунки, видео и прочее.  При обнаружении новых, добавляет в свой список. Таким образом, любой документ на сайте, на который есть ссылки, может быть найден роботом, а значит, и поисковиками.

Что нам нужно сделать. Прежде всего скачать шаблон файла robot.txt себе на компьютер. Настроить. Очень аккуратно и без ошибок. И после настройки, разместить на свой сайт в корневую директорию.

Настроились? Приступаем.

Ссылка на скачивание шаблона файла robot.txt Кнопка скачать

Нажмите на рис.

Структура robots txtСкачиваем с  сервиса Яндекс диск. Кто еще не использует данный сервис - Рекомендую.

Удобное, надежное хранение файлов на серверах Яндекс.

Для одного аккаунта предоставляется 10 Gb дискового пространства. Аккаунтов как вы понимаете можно иметь любое необходимое количество.

Возможен доступ с разных рабочих мест и различных устройств интернет доступа.

 После скачивания файла. Обязательно проверте его название. Бывает вероятность случайного, двойного скачивания. Если дважды кликнуть мышкой по скачиваемому файлу то два и получим, но с разными именами. Название должно быть только robot.txt При необходимости правим название.

 Нажмите на рис.

Правка файла robots txt

 Открываем в любом текстовом редакторе. Приступаем к правке.

Будьте особо внимательны. Никаких ошибок. Очень аккуратно заносим свои данные,

В этом текстовом файле необходимо провести правки последних трех строчек.

Все что выделено зеленым Ваш сайт аккуратно заменяете своим именем домена

у меня aragrig.ru

В строчке между Host: Ваш сайт имеется пробел. Этот пробел не убираем.

Итак HostдвоеточиепробелВашсайт  

После правки и изменения трех последних строчек. Нажимаем на сохранить файл. Закрываем блокнот. И еще раз открываем сохраненный файл  robot.txt

Нажмите на рис.

Robots txt для сайта

Проверяем, убеждаемся , что все изменения сделаны вами правильно и данный файл можно установить к себе на сайт.

Почему такая осторожность и бдительность.

Потому что с этим файлом будет работать сверх умная, но без мозгов машина. Язык цифр очень критичен. Изменение всего лишь одного цифрового символа, полностью изменяет поведение, принятие решения и иные действия цифровой техники.

 Продолжаем.

Заходим в панель управления хостинга "TimeWeb"

https://hosting.timeweb.ru

Вводим свои логин и пароль

Нам нужна новая панель управления.

Нажмите на рис.
TimeWebНапоминаю в левом нижнем углу есть кнопка перемещения на старую или новую панель.

Нажимаем на "Файловый менеджер" или на графический элемент меню "Загрузить файлы"

Нажмите на рис.

Загрузка robots txt в корневую директорию сайта

Файловый менеджер готов к работе  с Главной папкой (имя такое же как и у домена) и её содержимым

Нажимаем (наводим курсор и дважды кликаем левой кнопки мышки) на эту папку она открывается и нам предоставляется папка "Паблик" (Publik_html) Именно в этой папке содержатся все файлы нашего сайта.Смотрите ниже.

Нажмите на рис.

publiс html

 

Теперь нажимаем (дважды кликаем) на папку public_html и перед нами открывается "Корневая директория" файлов нашего сайта.

Состоит из папок различного програмного обеспечения, контента и отдельных файлов. В Эту корневую директорию нам и предстоит загрузить наш файл robot.txt

 

Нажмите на рис.

Состав public_html

В своей практике в последующем будете иметь дело с папкой "wp - content" в которой есть подпапка с плагинами, подпапка с рисунками. Но это потом.

А сейчас в меню файлового менеджера (Файл, Правка, Архиватор)

Нажимаем левой кнопкой на "Файл" и далее "Загрузить на сервер"

Нажмите на рис.

Загрузка файла robot txt на сервер Timeweb

 

Нажмите на рис.

Панель управления TimeWebЧерез несколько секунд програмной обработки

Нам предлагается "Выберите файл для закачивания на сервер"

Нажимаем "Прикрепить файл"

Нажмите на рис.

 Прикрепить файл robots txt к загрузке на сервер

Открывается файловый менеджер нашего компьютера, Находим  папку, где лежит файл robot.txt

И нажимаем на клавишу "Открыть"

Нажмите на рис.

Robots txt host

Появляется подтверждение, что выбранный файл прикреплен.

Если по какой то причине, такого подтверждения нет (сбой интернета, программный сбой компьютера, да мало ли чего)

Нужно еще раз нажать на "Прикрепить файл"

Видим всё нормально нажимаем на "Загрузить"

Идет процесс загрузки. Система показывает словами напротив прикрепленного файла   В процессе Пожалуйста подождите.

Но файл настолько маленький, что всего этого вы просто не увидите. Все произойдет мгновенно.

Файл robot.txt вы увидите, среди других файлов корневой директории.

Нажмите на рис.

Robots txt для сайта wordpress

 Самый важный файл для индексации и поискового продвижения сайта

Установлен!

Далее нас ожидает решение не менее Важной и нужной задачи.

Мы с вами установим плагин  "XML Sitemap"

Переходим по ссылке

Кнопка перехода