В текущих мировых реалиях и экономических условиях предлагаем освежить в памяти алгоритм оптимизации сайта — первые шаги в продвижении. Подробно остановимся на каждом этапе, кроме интуитивно понятных: регистрации в сервисах и установки счетчиков. В конце разделов мы оставили ссылки на полезные материалы.

Если вы уже обратились в агентство и только начали сотрудничество, то наш материал станет чек-листом сознательности работы подрядчика.

Сбор семантики

Семантическое ядро — набор запросов, по которым пользователи в идеале должны находить определенные страницы вашего сайта. Например, купить ортопедические стельки, кухонный миксер недорого.

Выберите приоритетные разделы сайта. С точки зрения ведения бизнеса — наиболее маржинальные товары. С точки зрения объема ассортимента — чем шире товарная матрица, тем проще будет бороться за топ выдачи. Дальше мы будем работать с тематиками отобранных разделов.

Семантическое ядро должно максимально охватывать выбранные тематики, включая всевозможные вариации запросов и синонимы. Нужно перекрыть весь спрос. Среднего объёма ядра не существует. Оно меняется от тематики.

Полнота ядра влияет на результат, поэтому используем максимальное количество источников для его сбора.

Источники поисковых систем

Яндекс и Google имеют инструменты поиска ключевых запросов.

• Яндекс Wordstat. Показывает, как часто пользователи обращаются к Яндексу с определенным запросом. Вы указываете нужный регион, вбиваете в поиск тематику и смотрите на похожие запросы, смежные запросы и количество показов каждого запроса. Так проходимся по ключевикам, которые вторят тематикам сайта, что вы выделили. Найденные запросы переносим в таблицу.

1 — число показов запросов, содержащих заданную фразу — общая частотность; 2 — запросы, которые содержат заданную фразу, и их частотность; 3 — похожие запросы — те, которые пользователи задают в рамках одной поисковой сессии или просто близкие по смыслу на взгляд Яндекса.

• Планировщик ключевых слов Google. Сначала зарегистрируйтесь в AdWords. Выберите «Планировщик ключевых слов».
  
  

  

  
  

  Из двух вариантов получения статистики вам нужен «Найдите новые ключевые слова».

  
  

  

  
  

  Не пугайтесь, что от вас просят список, в поле для ключевиков вводим все те же тематики сайта, что и для Яндекс вордстата.

  
  

  Указываем необходимый регион и получаем список дополнительных слов.

  
  
  
• Поисковые подсказки. При введении запроса в Яндекс система подсказывает возможные продолжения. Их тоже записываем в таблицу.
  
  
  
• Блок «Поиск по похожим запросам». Находится внизу страницы выдачи Яндекса, там тоже можно найти новые варианты ключевиков.

Данные собственного сайта

Если на сайт уже были установлены счетчики аналитики либо сайт добавлялся в вебмастера — большое везение. Вы можете зайти в кабинет и посмотреть, по каким запросам на какие страницы заходят пользователи, а какие разделы остаются без внимания.

• Яндекс Вебмастер;
• Google Search Console;
• Яндекс. Метрика;
• Google Analytics.

Например, посмотрите отчеты «Поисковые запросы» Метрики и Analytics.

Либо по каким фразам отображался сайт.

Внешние сервисы

Кроме поисковиков и метрик удобно использовать специальные сервисы. Например, MegaIndex.

Проходите авторизацию, в списке инструментов ищите «Подбор запросов по URL» или «Подбор и кластеризация запросов».

Указывайте интересующую страницу либо домен, и система формирует список запросов.

Сервисов по подбору много — https://www.bukvarix.com/,
http://keys.so/, https://seranking.ru/. Сбор данных из разных источников позволит не упустить запросы, которые потом привлекут целевой трафик.

Парсинг

После определения основных запросов переходим к глубокому сбору ядра — работа с программой Key Collector:

1. Создайте новый проект.
   
   
2. Укажите регион для сбора частот.
   
   
3. Выберите инструмент «Пакетный сбор слов».
   
   
4. Добавьте отобранные ранее запросы и запустите сбор.
   
   
5. Соберите точные частоты запросов.
   
   
   
   В настройках сбора оставьте параметры по-умолчанию.
   
   
   
   Формируется таблица запросов с указанием точной частоты
   
   
   
6. Удалите запросы:
   
   • С нулевой точной частотой, чтобы сосредоточиться на более эффективных ключевиках.
   • Нерелевантные запросы, которые не соответствуют ассортименту, или несут информационный интент. То есть у пользователя нет цели купить, его цель — узнать. Например, запрос «Достоевский, Бесы» не подразумевает покупку книги.
   • Дубликаты. Быстро найдет все повторения функция «анализ неявных дублей».
   
   
   
   
7. Выгружаем ядро. Для этого на верхней панели есть инструмент «импорт в Excel»
   
   
   

Кластеризация и структура

После сбора и чистки запросы кластеризируют. Сейчас наиболее эффективный подход к группировке — кластеризация по топам — объединение запросов на основе анализа выдачи поисковых систем.

В одну группу идут запросы, если по ним в топ-10 выдачи находятся несколько одинаковых url-адресов. Наиболее популярные инструменты: https://just-magic.org/, http://keyassort.ru/, https://www.rush-analytics.ru/.

Для разбиения запросов на группы можно воспользоваться более простым бесплатным инструментом — https://arsenkin.ru/tools/check-top/.

Инструмент определяет количество одинаковых урлов по различным запросам. Если процент совпадения большой, то их стоит объединять в один кластер, если наоборот — стоит продвигать на разных страницах. На изображении выше видно, что по запросам «купить ежедневники» и «ежедневники недорого» много совпадений, отмечены цветом — идут в один кластер. А по запросам «ежедневники оптом», «тиснение ежедневников» мало совпадений — идут в разные.

На основе кластеров составляем структуру сайта и будущее расположение целевых страниц. Для каждой группы определяем дочерние и родительские группы. По итогу должно получиться что-то вроде этого.

Полезные ссылки:
Как собрать семантические ядро
Как кластеризировать запросы
О построении структуры

Анализ конкурентов

Основа аудита конкурентов — показатель видимости. Видимость сайта можно получить из Megaindex или Топвизор.

Анализ видимости в Megaindex

Разбирем, как получить список конкурентов в Топвизоре:

• создать проект;
  
  
• настроить сбор позиций в интересующем вас регионе;
  
  
• добавить ключевые фразы;
  
  
• выбрать инструмент «Мои конкуренты» и отправить запрос на сбор конкурентов.
  
  

Далее отберите 10-15 конкурентов, которые занимают топ по показателю видимости и начинайте аудит.

• Выявите важные составляющие страниц. Полнота ассортимента, функции, упрощающие решение задач пользователя, содержание страниц, адаптивность.
• Определите типы страниц, которые отображаются в топе по ключевым запросам. Карточка товара, страница каталога, информационная статья. Тип страницы учитывается при ранжировании, поэтому важно, чтобы ваша целевая страница совпадала по типу с выдачей.
• Проследите, на каких страницах есть текст.

Анализируемые свойства конкурентов в каждой тематике уникальны. В файле мы собрали базовый набор для e-commerce, который позволяет оценить недостающие элементы на сайте. Желательно проводить подобный анализ по каждому кластеру запросов на наличие тех или иных элементов.

В итоге у вас получится сводная таблица сравнения конкурентов по важным параметрам.

На основе аудита сформируйте точный план доработок сайта:

• Отберите из проанализированного, чего нет на вашем сайте и, что вам подходит.
• Выделите, какие элементы внедрить на всем сайте для удобства пользователя.
• Продумайте контент и объем ассортимента для каждой целевой страницы.
• Идете к программисту с формализованными и точными задачами по доработке сайта.

Полезные ссылки:
Определяем видимость сайта
Еще немного про конкурентов

On-page оптимизация продвигаемых страниц

Ставит акцент на постраничную проработку сайта, продвижение конкретных страниц.

При кластеризации вы определили целевые страницы и будущее расположение их на сайте. Сейчас пришла очередь оптимизировать эти страницы:

• Создать новые посадочные страницы, если для каких-то кластеров их нет.
• Написать теги на основе ключевых слов и присвоить их страницам.
• Проверить коммерческую составляющую. Выборка товаров, указаны цены.
• Написать контент при необходимости. Как всегда, — помним про уникальность и соответствие требованиям поисковых систем.

Это первый камень, о который споткнется ваша самостоятельность. Для создания новых страниц придется обращаться к внешнему программисту, если инхаус технического специалиста нет.

Полезные ссылки:
Для чего нужна уникальность текстов на сайте
Переоптимизированные тексты

Настройка индексации

Индексация — добавление сведений о сайте роботом в базу данных поисковых систем, по которой Яндекс и Google потом ищут ответы на наши с вами запросы. Поэтому важно, чтобы все целевые страницы находились в базе поисковых систем.

Настройка индексации начинается с добавления сайта в панели вебмастеров:

• Яндекс Вебмастер;
• Google Search Console;
• Вебмастер Mail.Ru.

Инструкция, как добавить, есть в каждой системе, это несложно, нет никаких хитростей.

Если сайт ранее индексировался, нужно проверить проиндексированные страницы. Смотрите наличие целевых страниц в индексе
и отсутствие мусорных страниц (страниц фильтраций или сортировки, деактивированных страниц). В Вебмастере это раздел Индексация > Страницы в поиске > вкладка «Все страницы». В Google Search Сonsole раздел Индекс > отчет «Покрытие».

https протокол

Подключение https протокола — must have для продвижения. Сейчас без защищенного протокола пользователи вместо страниц вашего сайта будут видеть предупреждение о возможной угрозе.

Подключение SSL сертификата и настройку редиректов с http на https осуществляет технический специалист. Вам потребуется добавить сайт с защищенным протоколом в вебмастера поисковых систем, и отправить заявку на переезд.

Главное, проследите, чтобы при переносе не слетел весь трафик и целевые страницы быстро смогли проиндексироваться. Сравните объем трафика на сайт до (если есть данные) и после перехода. Посмотреть объем по заданным периодам можно в отчете Яндекс Метрике «Посещаемость». Если трафик слетел, то посмотрите, какие страницы вылетели из индекса, и отправляйте сначала ведущие, а потом остальные на индексацию.

• В Я. Вебмастере в разделе Индексирование > Переобход страниц указываете адреса для переобхода.
  
  
• В Google Search Сonsole вводите поочередно адреса вылетевших страниц в верхнюю строку поиска и запрашивайте повторную индексацию.
  
  

Ждете, пока страницы не вернуться в поиск, и параллельно проводите все работы, что описаны ниже.

robots.txt

Файл robots.txt помогает поисковыми роботами Яндекс и Google правильно и быстро найти страницы, которые надо проиндексировать. На основе данных индексации настройте файл:

• Создайте текстовый файл robots.txt.
• Пропишите отдельные директивы, которые определяют для каких поисковых роботов работают правила. User-agent: * — для всех поисковых роботов, User-agent: Yandex — для роботов Яндекса.
• Установите запрет на индексацию всех служебных разделов сайта (админка, корзина, регистрация/авторизация).
• Скройте от индексации уже проиндексированные мусорные страницы (в случае их обнаружения).
• Разрешите доступ к системным файлам, отвечающим за корректное отображение ресурса на мобильных устройствах (изображения, файлы скриптов и стилей). Файлы, которые надо открыть, помогает определить https://search.google.com/test/mobile-friendly.
• Добавьте ссылки на карту сайта в конце файла в формате «Sitemap: %site%/sitemap.xml».

Пример сформированного файла robots.txt.

Мониторинг индексации

Управлять и следить за индексацией можно дополнительными способами:

• Создать актуальный файл sitemap.xml. Документ, который содержит ссылки на все страницы вашего сайта. Пример: burotkani.com/sitemap.xml. Его нужно добавить в Вебмастер Яндекс и Google.
• Настроить Параметры URL в Google Search Console. Работаем над корректной индексацией get-параметров. Это параметры фильтрации и сортировки, которые в URL-адресе идут после вопросительного знака. Настройка исключает из индексации страницы сортировки, фильтрации, чтобы дублирующийся контент не индексировался и пагинация воспринималась адекватно. Для настройки кликните на «Добавить параметр», пропишите название, выберите из списка подходящие описания и отметьте условия сканирования:
• Добавить наиболее значимые страницы в Мониторинг важных страниц в Яндекс Вебмастере. Это позволит следить за изменением статуса индексирования и мета-тегами страниц, которые собирают наибольший трафик или должны обязательно присутствовать в поиске.
  
  

Полезные ссылки:
Как создать карту сайта
Про проверку индексации и мусорные страницы
Технические детали настройки robots.txt

Геопривязка

Указываем принадлежность сайта к какому-либо региону. Геопривязка помогает сайту ранжироваться по геозависимым запросам в регионе присутствия или главном для продвижения регионе.

Яндекс

В Яндексе привязать регион можно двумя способами:

• Через Яндекс.Справочник. Привязывается неограниченное количество филиалов к разным регионам. Для регистрации в Яндекс.Справочнике подтверждайте указанные контактные адреса по номеру телефона. Вам звонит оператор и сообщает код для привязки. Такой вид привязки к нескольким регионам менее эффективный, чем привязка через Яндекс.Вебмастер.
• Через Яндекс.Вебмастер. Указать можно всего лишь один регион. Чтобы его добавить, перейдите в раздел «Информация о сайте» — «Региональность». Для подтверждения требуется только страница сайта с региональной информацией — адрес, телефон, карта.

Яндекс Вебмастера. Региональность сайта.

Google

Привязка региона в Google происходит через регистрацию сайта в Google Business. Нужен фактический адрес компании, на который придет письмо с кодом подтверждением.

Полезные ссылки:
О геозависимых запросах

Установка систем аналитики

Системы аналитики нужны, чтобы следить за трафиком, анализировать аудиторию сайта, эффективность страниц, фиксировать целевые действия, собирать данные об электронной коммерции. Наиболее распространенные инструменты — Яндекс Метрика и Google Analytics. С установкой все просто, системы сами покажут нужные шаги.

Google Analytics.

Яндекс.Метрика.

Одна из главных возможностей систем аналитики — отслеживать конверсионные действия на сайте, цели, которые достигают пользователи:

• заполнение форм обратной связи;
• оформление заказов;
• добавление товаров в корзину и прочее.

Работы по настройке целей выполняет программист, но можно попробовать самим установить цели через Google Tag Manager.

Полезные ссылки:
Как установить счетчик Google Analytics
Как установить счетчик Я.Ментрики
Как настроить цели в Я.Метрике
Как настроит цели через Google Tag Manager

Техническая оптимизация

На этом этапе корректируем все, что касается внутренней работы и влияет на ранжирование сайта, восприятие поисковиками.

Работы по технической оптимизации выполняет программист. Вы выступайте, как постановщик задачи и тестировщик результата.

Скорость загрузки

Как пользователи, так и поисковые системы любят быстрые сайты. Нужно стремиться, чтобы каждая страница загружалась не более 3 секунд. Получить данные о скорости загрузки можно на https://tools.pingdom.com/. Если скорость низкая, ставьте программисту задачу на технический анализ сайта и повышайте скорость.

Мобильность

Сайт должен корректно отображаться на любом устройстве: ноутбук, телефон, планшет. С первым все понятно — это просто ваш сайт. А для работы с сайтом на смартфоне нужна мобильная версия или адаптивный дизайн. Без этого будет сложно занять лидирующие позиции. Алгоритм mobile-first index отдает предпочтение в ранжировании сайтам адаптированным под мобильные устройства.

Если сайт криво и косо отображается на смартфоне, то лучше обратиться к тому же агентству или фрилансеру, чтобы адаптировать или разработать специальную мобильную версию. По итогу проверяйте корректность отображения для роботов поисковиков в сервисе https://search.google.com/test/mobile-friendly.

Дубликаты

Дубликаты мешают поисковикам понять, какую страницу стоит показывать в выдаче. Нужно устранить дубликаты страниц — настроить главное зеркало и редиректы:

• Редирект на www или без www, смотря, какой адрес является главным зеркалом. Его можно определить по количеству страниц в выдаче. Делаете запросы в Яндекс формата url:site.ru*, url:www.site.ru* и смотрите, по какому адресу больше страниц в поиске.
  
  
• Редирект с http на https.
• Устранение технических дублей страниц — со слешем/без слеша, .html, .php на конце и прочее. Если адреса ссылок на вашем сайте указаны со слэшем site.ru/catalog/knigi/ то, чтобы избежать дубликатов, нужен редирект с site.ru/catalog/knigi, site.ru/catalog/knigi.html, site.ru/catalog/knigi.php на site.ru/catalog/knigi/.

Проверить работы можно с помощью сервиса https://webmaster.yandex.ru/tools/server-response/. В поле «Опрашиваемый URL» указываем любой адрес, с которого должен происходить редирект. В блоке «Ответ» смотрим на код статуса HTTP, если указан 301 редирект, а в поле Location корректный адрес, значит работы выполнены верно. На скриншоте проверили редирект страницы без слэша на конце на страницу со слэшем.

Несуществующие страницы

Несуществующие страницы появляются на сайте по разным причинам: деактивировали товар, изменили url, а редирект не настроили.

Когда пользователь переходит по несуществующему адресу, сервер должен возвращать 404 код ответа и показывать соответствующую страницу. При неверной настройке сервера эти страницы отдают код ответа 200 и могут проиндексироваться, ухудшая

ранжирование других страниц. Проверить, какой код ответа у несуществующей страницы можно при помощи того же https://webmaster.yandex.ru/tools/server-response/.

Битые ссылки

Битые ссылки уводят посетителей с вашего сайта на несуществующие страницы, вашего же сайта или других ресурсов. Такого быть не должно. Обнаружить битые ссылки помогут программы https://www.screamingfrog.co.uk/ и http://home.snafu.de/tilman/xenulink.html.

Запускайте сканирование всего сайта. По статусам 404 или not found находите список страниц, где есть битые ссылки, и перечень этих ссылок. Битые ссылки нужно удалить или исправить на верные.

Ошибки верстки

Частые ошибки в верстке:

• на странице нескольких заголовков h1;
• теги h2-h6 используются как элементы стилистического оформления и дизайна;
  
  
• css стили и js-код присутствуют в коде страницы, а не подключены через внешний файл.
• Обладать уникальным title.
• Быть открытыми для индексирования.

Ошибки

В процессе технической оптимизации важно проследить, чтобы на сайте не появились новые ошибки:

• Префикс пагинации у первых страниц разделов. Например, в Битриксе пагинация по умолчанию строится с помощью GET-параметров, которые имеют вид PAGEN_1=N, где N — номер страницы пагинации.
  Допустим, первая страница категории имеет вид /catalog/category/, вторая — /catalog/category/?PAGEN_1=2, третья — /catalog/category/?PAGEN_1=3 и так далее. В этом случае важно, чтобы первая страница НЕ была доступна по адресу /catalog/category/?PAGEN_1=1.
• Текст с описанием категории на следующих за первой страницах.
  Доступны и индексируются несуществующие страницы пагинации. Несуществующие страницы — страницы вида /catalog/category/?PAGEN_1=N, где N — больше реально существующего количества страниц в пагинации. Они должны отдавать 404 ошибку, либо перенаправлять на главную страницу раздела.

Полезные ссылки:
Как перейти на https без потери трафика
Как найти битые ссылки
Что делать с дубликатами страниц
Настройка ЧПУ
Подробно про хлебные крошки
Индексация страниц пагинации

Про сниппеты

Работа с тегами

Важная составляющая продвижения — правильное заполнение тегов title, description и h1. По тегам Яндекс и Google первично оценивают и ранжируют сайты.

Некоторые административные части имеют удобный интерфейс, где для каждой страницы можно прописать теги. А некоторые нет. Обращаться или нет к программисту зависит от вашей CMS (система управления содержимым сайта).

Title

Заголовок страницы сайта, который информирует о ее контенте. Он отображается в названии вкладки окна браузера и часто используется при построении сниппета в поисковой выдаче.

Запомните:

• Чем привлекательнее он выглядит, тем выше вероятность клика по нему из поисковой выдачи.
• Наличие запроса в теге title — важный фактор ранжирования.

Description

Краткое описание страницы. Прописывайте суть страницы, ее главную пользу для читателя.

Иногда description используется при формировании сниппета. В Яндексе — если поискового запроса нет в тексте страницы. В Google он отображается в выдаче чаще.

Пример отображения description в Google

Пример отображения description в Яндекс

H1

Тег заголовка первого уровня. Кратко отразите основную информацию страницы. Используйте названия товаров, разделов и категорий.
Основные требования к перечисленным тегам:

• присутствие на каждой странице сайта;
• вхождение ключевиков;
• уникальность каждого тега для каждой страницы;
• использование в коде одной страницы только один раз.

Отсутствие или дублирование title, description и h1 — ошибка. Поэтому, если у вас большой интернет-магазин, то целесообразно настроить автоматические шаблоны формирования тегов для типовых страниц и разделов сайта. Некоторые CMS позволяют сразу задавать шаблоны формирования. Если нет, то придется идти к программисту.

Пример шаблона для страницы товара:

Title: %Название товара% – купить по цене %Цена% в %Название компании%

Description: %Название товара% в интернет-магазине %Название компании%. Большой выбор %категория товаров% по низкой цене в %Регион продвижения%.

H1: %название товара%

Возникает проблема, когда в интернет-магазине несколько товаров имеют одинаковые названия. Решение — указать в названии дополнительно любое уникальное свойство.

Например, две искусственные елки «Клеопатра», высотой 150 см, зеленого и белого цвета. В первом случае в названии товара указываем высоту, во втором — высоту и цвет, чтобы не было дублирования.

Если количество дубликатов велико — можно прибегнуть к автоматической генерации h1, исходя из набора уникальных свойств.

Пример формирования тегов в CMS Битрикс

Полезные ссылки:
Почему важно прописывать title
Еще немного про теги

Завершение оптимизации сайта

Этап оптимизации в среднем занимает месяц, два. Результат, в виде динамики трафика, увеличения позиций будет еще как минимум через месяц. Изменения должны проиндексироваться.

Оптимизация — не все продвижение, это лишь первый этап. Он делает ваш сайт более видимым для поисковиков и приятным для посетителей. После идет ежемесячное продвижение. Наращивают внешнюю ссылочную массу, сайт регулярно наполняют контентом, проводят UX/UI анализ, дорабатывают функции сайта, анализируют полученные результаты. Только комплексный подход даст результат.

Если сейчас у вас нет возможности отдавать сайт на продвижение, то самое малое и эффективное, что вы можете сделать сами:

• Наполнять сайт уникальным, интересным контентом.
• Настроить индексацию и следить за ней.
• Анализировать трафик и иногда направлять сайт на технический аудит.
• Правильно заводить и деактивировать товары, прописывая оптимизированные мета-теги.
• Следить за конкурентами и адаптировать под себя фишки, которые помогают им быть в топе.
• Помнить, что продвижение сайта — непрерывный процесс.