файл robots.txt для вашего сайта или блога это важный элемент

Файл robots.txt на вашем блоге или сайте важный элемент. Этот пост должен помочь тем, кто недавно создал свой сайт или блог. Сама тема не нова и Вы, конечно же, многократно “встречались”  с этим  плагином, и знаете его предназначение для ресурсов, созданных на базе WordPress.

Коротко поясню, robots.txt — особый файл в формате txt , куда  заложена подсказка  для поисковых роботов. Благодаря этому плагину,  можно ввести запрет на  индексацию, выбранных Вами страниц, записей и др., а так же, точно указать зеркало домена и расписать путь к плагину sitemap.xml .

Когда я создавал свои первые блоги и сайты, то об этом плагине мне было лишь известно, что его присутствие необходимо, но со временем узнал больше и сегодня хочу поделиться информацией, которая будет для Вас, уважаемый читатель, весьма полезной.

 Для того, чтобы  исключить ошибку, связанную с созданием и заполнением плагина robots.txt, необходимо выполнить проверку его на ошибку, так называемого, “хитрого пробела”. В принципе, такая  ошибка имеет определённую вероятность быть, но она не обязательна. И тем не менее я  рекомендую Вам выполнить такую проверку.

Предлагаю посмотреть небольшой урок, как найти и устранить эту ошибку.   Урок проводит преподаватель Тренинг центра “Твой старт” Михаил Гаврилов.