Правильная структура сайта, техническая составляющая

Приветствую друзья. В данной статье поговорим о том, каким должен быть блог с точки зрения поисковых систем и какая должна быть правильная структура сайта.

Также поговорим о том как в принципе работает поиск и поисковые роботы.

Статья разделена на 2 части, в первой рассмотрим технический аспект, во второй части статьи маркетинговый аспект поисковой оптимизации.

Я уверен что после прочтения статьи многие технические вопросы проясняться.

Узнаем о таком замечательном инструменте — Яндекс.Вебмастер, который должен стать прикладной программой для каждого блогера. 

1. Как работает поиск

Для того, чтобы о вашем блоге узнал поиск, до него должны дойти поисковые роботы. До тех пор пока поисковый робот не попадет на ваш сайт, он в поиске не появится. Процесс попадания ресурса в поиск разделен на несколько этапов:

• Индексирование — процесс сбора, обработки и добавления информации о сайте в базу данных. Робот должен узнать о появлении страницы, запланировать ее обход, получить контент, включить страницу в поиск.
• Ранжирование — упорядочивание результатов поиска в соответствии с запросом пользователя. Суть следующая — пользователь задает запрос, поисковая система находит документы, которые удовлетворяют запросу, рассчитывает их релевантность, подбирает наиболее подходящие документы для решения задачи пользователя и упорядочивает их по убыванию. Всего факторов ранжирования более 1500.

2. Правильная структура сайта — технические аспекты

Для того чтобы поисковая машина узнала о существовании сайта, лучше всего «напрямую» ей об этом сказать, не дожидаясь пока роботы найдут ваш ресурс в глубинах интернета.

У каждой поисковой системы есть сервис, с помощью которого можно ей сказать — «вот мой блог, проиндексируй его». У Яндекса это Яндекс.Вебмастер, у Гугла - Google Search Console. В данной статье более подробно рассмотрим Яндекс.Вебмастер.

Для того, чтобы начать получать данные о вашем сайте в поиске, необходимо подтвердить ваши права на него. Делается это просто — указывается сайт, вам генерируется ключ, который вставляется на главную страницу. Далее сервис проверяет правильность ключа, убеждается, что вы владелец блога и предоставляет вам полезную информацию об этом сайте.

Яндекс.Вебмастер

Естественно, что Ваш ресурс должен быть доступен для поисковых роботов, т.к. бывают ситуации, что для обычных пользователей Ваш сайт доступен, а для роботов нет. Поэтом правильно при запуске сайта проверять его страницы на доступность, особенно его главную страницу на корректность ответа сервера.

Нет запрета на индексирование

После того, как Вы проверили, что есть доступ к Вашему сайту, необходимо убедиться, что нет запрета на индексирование. Т.е. робот должен получить «юридическое разрешение» владельца сайта на его индексирование. В интернете есть такое правило — по умолчанию индексировать можно все что не запрещено, поэтому будьте к этому готовы. Если Вы хотите что-то запретить индексировать сделать это можно с помощью файла robots.txt.

Чтобы посмотреть данный файл, необходимо в строке браузера набрать www.адрес-вашего-сайта/robots.txt. Файл в большинстве случаев генерируется автоматически, проверить его можно также в Яндекс.Вебмастере:

Анализ robots.txt

Правильно указано главное зеркало

Давайте разберемся, что такое главное зеркало. Рассмотрим такие адреса:

• http://site.ru
• http://www.site.ru
• https://site.ru

C точки зрения поисковой машины это разные сайты, а для нас это абсолютно одинаковые сайты, потому что на одном из этих адресов будет стоять перенаправление на другой. Главный сайт с основным контентом и есть главное зеркало.

Проверьте карту сайта sitemap

Правильная структура сайта подразумевает обновляемую карту, по которой поисковый робот будет делать обход. На современных блогах карта сайта обычно генерируется автоматически, и в нее добавляются все новые страницы с некоторыми параметрами, например когда страница была обновлена, чтобы роботу было проще понимать какие страницы надо посетить для обновления индекса.

Для того, чтобы карта сайты было точно воспринята роботом и никуда не потерялась, ее необходимо добавить в Яндекс.Вебмастер напрямую. Это сильно поможет поисковой машине и соответственно Вашему ресурсу.

Проверьте страницы на мобилопригодность

Все больше становиться смартфонов и планшетов, мобильный трафик неуклонно растет. Это значит что Ваш сайт получает все больше переходов с мобильных устройств и должен быть адаптированным для них. Сайты под мобильные устройства адаптируются разными способами:

• мобильные версии — размещаются на поддомене, например с буквой m. При этом приходится поддерживать два сайта, что не всегда удобно.
• сайты с адаптивной версткой, которые подстраиваются под размер вашего устройства.

Проверить насколько ваш сайт мобилопригоден можно из меню Яндекс.Вебмастер — Инструменты -> Проверка мобильных страниц. При этом проверяются следующие вещи:

• Тег viewport указан
• Горизонтальной прокрутки нет
• Нет Flash-элементов
• Нет Java-апплетов
• Нет Silverlight-плагинов
• Текст удобно читать с мобильных

В Вебмастере есть пункт Диагностика сайта, которая проверяет сайт на более чем 20 параметров, связанных с поисковой оптимизацией Проблемы разделены на 4 типа: 

1. Фатальные — нужно срочно бежать и править сайт;
2. Критичные — сайт скоро может пропасть из поиска;
3. Возможные проблемы;
4. Рекомендации.

В этой части статьи мы рассмотрели технические аспекты поисковой оптимизации. Я очень надеюсь, что данные советы были полезны Вам, и вы сможете при необходимости разобраться например с проблемой просадки органичного трафика на Ваш сайт, куда смотреть, что делать и как это исправлять.

Маркетинговая составляющая сайта (Часть 2) >>