Аудит сайта самостоятельно 

Проведение SEO-аудита может помочь сэкономить бюджет на рекламу и добиться хорошей видимости сайта в результатах поисковых систем.
*По материалам вебинара Сергея Кокшарова, в котором он рассказал, зачем нужны SEO-аудиты, на что следует обратить внимание в первую очередь при их проведении, и какими инструментами пользуется он лично для решения тех или иных задач.

Cуществуют два направления при анализе сайта:

Первое – аудит (это может быть какой-то определенный контрольный список, по которому проверяется наличие стандартных требований). Аудит можно проводить самостоятельно, он решает более общие вопросы.

Второе – экспертиза. Она уже требует опыта и отвечает на более узкие вопросы. Например, такие как:

• Как оптимизировать перелинковку для контент-проекта?
• За что был наложен фильтр и как от него избавиться?
• Как откорректировать стратегию развития сайта для получения большего числа посетителей?
• Почему по запросу [часы касио] упали позиции, а по другим все ок?

Здесь могут понадобится нестандартные инструменты; возможно их придется заказать у разработчиков по специальному техзаданию.

Оба этих направления решают общую задачу – помогают улучшить сайт, получить больше посетителей и улучшить видимость в поиске.

Для чего нужен SEO-аудит?

Он позволяет найти неиспользованный потенциал и, если полученные рекомендации внедряются, видимость ресурса в поисковых системах с большой вероятностью улучшится.

Какие сложности возникают при проведении?

1. Требуются хотя бы небольшие аналитические навыки. Если их нет, лучше попросить знакомых или заказать данную работу у подрядчика(будет возникать ряд проблем).

2. Сложно без опыта и примеров. Необходимо иметь доступ к некоторым инструментам и владеть какими-то методиками.

3. Нужно ориентироваться в современных тенденциях поисковых алгоритмов.

Анализируя сайт, прежде всего нужно разбираться в том, как он работает. Хотя бы понимать, что он состоит из html-кода, что у него есть http-заголовки, текстовые ссылки. Нужно представлять, как работает поисковая система. Возможно, не очень глубоко, но хотя бы в общих чертах понимать принцип ее работы.

Основные этапы работы поисковой системы

1. Составление плана.

Поисковая система составляет план – на какие сайты зайти, какие новые страницы индексировать или переиндексировать. На каждый момент времени у нее есть план, что сейчас делать. На данном этапе вебмастеру нужно показать поисковой системе, что на сайте появилось что-то новое или изменилось что-то из старого.

2. Сбор данных.

Потом робот собирает данные, так называемый процесс “crawling”. Поисковая система взаимодействует уже непосредственно с сайтом. На данном этапе необходимо обеспечить максимально эффективное взаимодействие с поисковыми роботами.

3. Индексация

Дальше происходит индексация сайта (сохранение полученных данных). Проверка индексации страниц своего сайта должна выполняться вебмастером постоянно, для того, чтобы избежать ошибок индексации и вовремя заметить выпадение каких-либо страниц из индекса.

4. Вычисление

Потом вычисление различных метрик — таких как PageRank, SpamRank и TrustRank на основе характеристик текста и ссылок.

5. Ранжирование

Происходит непосредственно в тот момент, когда пользователь вводит свой запрос. (На основе сложной формулы заложенной в поисковую систему.)

6. Оценка качества результатов поиска

На последнем этапе поисковая система обязательно оценивает качество результатов поиска. То есть, насколько пользователь остался доволен, насколько сайты находящиеся сейчас в топе заслуживают быть там и стоит ли изменить их позицию.

Что нужно анализировать в аудите?

Здесь на помощь приходят метрики эффективности, которые помогают определить — насколько эффективно работает сайт или насколько эффективно он оптимизирован.

Сергей выделил четыре основные метрики:

Если выбирается метрика «Траффик», стоит уделить внимание (кроме прочего) сниппету, его оформлению, сравнить с другими сниппетами — насколько он привлекает пользователя?

Если целью является постоянный рост семантического ядра, чтобы на сайт заходили по большему количеству запросов — нужно добавлять больше товаров, новые тексты и так далее.

Метрики часто взаимосвязаны между собой. Например, если мы хотим улучшить позиции – возможно, нам необходимо где-то переписать тексты, что непосредственно затрагивает и юзабилити, и визуальное восприятие сайта.

Последняя группа метрик – технические, о которых редко говорят, но именно они чаще всего встречаются в SEO-аудитах. Это все те моменты, благодаря которым сайт максимально эффективно взаимодействует с поиском в техническом плане.

Без каких инструментов нельзя обойтись?

1. Бесплатный онлайн сервис SEO-cheklist. В этом чеклисте есть ряд пунктов, следуя которым можно отмечать для себя, выполнен или нет тот или иной пункт.

2. Также очень пригодится бесплатная программа Xenu. Она позволяет сканировать сайт и находить внутренние ошибки, скорость ответа страниц (то, о чем говорилось в техническом плане).

3. Для браузеров есть определенные плагины, на которые стоит обратить внимание.

• Web Developer Toolbar для Mozilla Firefox позволяет отключать «куки», картинки, кэш, проверять валидность кода и прочее. Он упрощает работу с кодом.
  
• Firebug, которым можно посмотреть сам код в очень удобной форме, загрузку каждого элемента страницы. С помощью этого плагина можно выяснить, загрузка каких элементов страницы занимает больше всего времени.

4. И, конечно же, не обойтись без Яндекс.Метрики, Google Analitycs и «Панели для веб-мастеров» Google или Яндекса.

Платные. Даже если их не покупать, ознакомиться с ним все же будет нелишним. Это:

• Screaming frog SEO spider очень похож на Xenu, но он позволяет более гибко проводить анализ и находить дубликаты
• Key Сollector позволяет работать с семантическим ядром и производить более широкий и удобный анализ семантики
• Ahrefs позволяет проводить анализ внешней оптимизации по различным разрезам
• Его альтернатива – Majestic SEO. У Маджестика есть ряд других особенностей: можно посмотреть историю появления ссылочной массы. Есть метрики, которые помогают определить насколько сайт «трастовый» (в какой мере ему доверяют поисковые системы)

Виды аудита

В зависимости от того, какие проблемы и метрики мы изучаем, аудит приобретает то или иное направление:

• Технический
  
• Внутренний
  
• Внешний
  
• Анализ семантики
  
• Анализ структуры сайта

Технический аудит

• Код сайта
  
• Скорость загрузки страниц
  
• Объем страниц
  
• HTTP-заголовки
  
• robots.txt и meta-robots

Полезные инструменты для проведения технического аудита:

Панели для веб-мастеров

• Web Developer Toolbar
  
• Firebug
  
• Xenu Link Sleuth
  
• Screaming frog SEO spider
  
• Site Auditor

Примеры. Например «Сообщения об ошибках в панели для вебмастеров».

Здесь показано, сколько 404-ых ошибок увидел робот, сколько страниц сайта запрещено файлом robots.txt, сколько содержат тег noindex. То есть, конкретная информация о том, как поиск видит документы и что рекомендуется исправить.

А вот другой пример – результат работы программы Site Auditor. Здесь можно проанализировать как общие характеристики (тИЦ, PageRank), так и посмотреть, сколько страниц сайта проиндексировано в определенных каталогах. Часто эта информация необходима.

Еще один пример – результат работы Web Developer Toolbar, когда отключаются «куки» и смотрится, как сайт выглядит без них. В данном случае левое меню формировалось исходя из того, какую страницу пользователь посещал в последний раз.

Естественно поисковая система не использует «куки»; она видит другое меню, не такое, как пользователь. На это тоже важно обращать внимание и знать, как видит сайт поисковая система.

Другой пример работы этой же программы – когда можно посмотреть сводную статистику по документу, какой его размер, сколько составляют картинки, различные flash-объекты или скрипты, стили. Посмотреть, что мы можем в данном случае оптимизировать.

На что стоит обратить внимание при техническом аудите? Часто допускаемые ошибки:

• Плохой хостинг
  
• Отсутствие 404 страницы
  
• Большой robots.txt для Google – это зло!

Пример плохого хостинга. Вот что может получиться, если немного увеличить нагрузку на сайт. Хостинг не выдерживает и выдает 502-ю ошибку.

Это плохо, потому что когда на сайт заходит поисковая система, она должна получать 200-й код – сайт в порядке или 304-й – содержание не изменилось.

404-я ошибка. Многие забывают ее оформить. Эта ошибка значит, что пользователь попал на страницу, которая не существует.

Обязательно нужно проверить, есть ли на 404-й странице какая-то информация. Люди могут переходить на несуществующие страницы, и логично в таком случае предоставить им какую-то полезную информацию, чтоб они не уходили, а продолжали работать с сайтом.

HTTP-заголовки — даже создавая 404-ю страницу, некоторые забывают в заголовках указать, что у нее код 404-й ошибки и отдают вместо него 200-й. Это означает, что такая страница существует и должна быть включена в индекс. В данном случае проверка была произведена с помощью плагина Firebug.

Про Robots.txt: некоторые сайты заводят очень длинный файл Robots.txt надеясь, что робот Google не будет переходить по этим страницам.

Для Яндекса это нормально, это работает и он исключает такие страницы из индекса. А Google по этим страницам не переходит, но и не исключает их из поиска, если он раньше их уже проиндексировал, или если на эту страницу ссылается много ссылок.

В результате получается мусорный индекс, когда сниппеты содержат текст «Описание веб-страницы недоступно из-за ограничений в файле robots.txt». Но, тем не менее, эти файлы в индекс добавляются.

Внутренний аудит

Здесь в первую очередь нужно анализировать:

• Индексацию и дубли
  
• Заголовки, мета-описания, контент
  
• Код сайта
  
• Работоспособность ссылок

Полезные инструменты – уже стандартный для нас набор программ и дополнение к нему – «Операторы запросов».

Вот пример с повторяющимися мета-описаниями в Google Webmaster Tools.

Сервис обязательно нужно использовать, смотреть и исправлять эти ошибки.

1. Основной индекс Google. У Google есть два типа индекса – основной и дополнительный. Все результаты, которые берутся для ранжирования, берутся из основного; а те, которые попадают в дополнительный, с большой вероятностью не показываются пользователю.

Есть оператор &, которой при вводе поискового запроса, как на изображении ниже, показывает в результатах – какие именно страницы находятся в основном индексе:

Если убрать этот оператор, то появятся все страницы, как из основного, так и из дополнительного индекса.

2. Тестовые поддомены в индексе.

На слайде пример, когда разработчики забыли закрыть от индексации тестовый поддомен. И это создает большое число дублей, что мешает сайту ранжироваться по каким-то низкочастотным запросам.

3. Код сайта.

С помощью инструмента Firebug можно анализировать код внутри сайта. Следует обратить внимание на следующие ошибки:

• Скудный meta-description
  
• Отсутствие бренда в заголовках
  
• Наличие малозначимых страниц

Novatek – это крупный интернет магазин. В прошлом году там была ссылка на страницу с уцененными товарами (и до сих пор присутствует).

Когда пользователь переходит по ней, он попадает на пустую страницу. Для пользователя это не несет ценной информации, для поисковика тоже. Он добавляет эту страницу в дополнительные результаты.

Отсутствие жесткой модерации – плохо, это надо анализировать. Например, искать в пределах сайта какие-то стоп-слова.

На слайде продемонстрировано, как на одном из известных форумов (он был взломан или модератор не уследил) на странице находится поисковый спам. Это плохо для самого сайта, так как поисковик, находя поисковый спам, снижает свое доверие к ресурсу.

Следующий тип анализа – анализ внешней оптимизации.

Внешняя оптимизация

Что анализируем?

• Ссылочные профили
  
• IP-адреса ссылочных доноров
  
• Конкурентов

Полезные инструменты здесь уже немножко другие. Прежде всего это Ahrefs, Majestic SEO, Open Site Explorer. Они похожи, но каждый имеет свою особенность.

Рекомендуется использовать первый сервис, он очень гибкий и дешевле по стоимости. Недавно сервис пополнился даже таким срезом, как IP-адреса, можно прямо по подсетям вылавливать сети сателлитов.

Также SemRush (для западного рынка), Prodvigator.ua (для Украины) и SpyWords (для России). Все эти сервисы позволяют анализировать конкурентов, смотреть по каким семантическим ядрам конкуренты видны в ТОПе и какой бюджет они тратят на рекламу.

Ну и напоследок – Alexa, бесплатный сервис, который позволяет примерно оценить трафик, если официальная статистика закрыта.

На этом слайде приведен скриншот из сервиса Majestic SEO. Здесь можно увидеть ссылочные всплески. Таким образом, при анализе любого сайта четко видно, что в марте и июне 2012 была большая закупка ссылок. Выбирая режим Normal можно посмотреть — сколько именно ссылок было найдено.

Ошибки, на которые стоит обратить внимание при анализе внешней оптимизации:

• переспам анкор-листа
  
• отсутствие модерации купленных ссылок
  
• использование сетей сателлитов.

Переспам анкор-листа: если мы используем сервис Ahrefs, мы четко можем видеть: какие ключевые фразы чаще всего используют в обратных ссылках.

В данном случае видно, что лазерная эпиляция – самое частотное слово и все остальные тоже коммерческие.

Кстати, данный сайт попал еще год назад под фильтр «Пингвин», проблема была именно в данном анкор-листе.

Отсутствие модерации. Обязательно нужно контролировать те ссылки которые покупаются или размещаются на других площадках (то, с кем мы соседствуем, очень важно).

Сети сателлитов. Сейчас сервис Ahrefs позволяет смотреть по каждому сайту в каких подсетях расположены сайты-доноры.

Выясняется много интересных моментов и можно понять причину, почему сайт попал под ту или иную санкцию.

Анализ семантики

Нам нужно посмотреть:

• Распределение запросов
  
• Поиск новой семантики
  
• Оценка потенциала

Полезные инструменты:

• Яндекс.Метрика, Google Analytics, LiveInternet
  
• Wordstat
  
• Поисковые подсказки
  
• Key Сollector

Этот тип анализа уже ближе к экспертизе и требует какого-то опыта; поэтому рассмотрен не очень подробно.

Здесь приведен скриншот из сервиса Key Сollector — наверняка многие им пользовались и пользуются. Тем, кто не пользовался, и кому требуется работа с семантическим ядром, Сергей советует приобрести в обязательном порядке. Сервис легко позволяет снимать различные показатели запросов, такие как частотности, конкурентность и так далее.

Последний тип анализа – проверка структуры сайта

Здесь анализируется:

• насколько структура соответствует подобранной нами семантике
  
• глубину вложенности
  
• насколько важные страницы расположены выше по уровню иерархии
  
• как оптимально проведена навигация на сайте.

Нужно обращать внимание на страницы, имеющие большой уровень вложенности. Инструменты вроде Xenu или Spider позволяют смотреть на каком уровне вложенности находится страница.

Несоответствие семантической структуре и SEO-навигация вредит юзабилити. На это тоже нужно обращать внимание, считает Серегей. Потому что если поисковые системы по жалобе конкурентов, либо с помощью алгоритмов находят, что навигация сделана для поисковика, они накладывают ряд санкций.

Конечно, все эти элементы сложно запомнить. К тому же, не все было перечислено. И для этого можно использовать сервис SEO-cheklist.

Советы для облегчения анализа сайта

1. Настройка целей в веб-аналитике.

Судя по опросу, который Сергей недавно проводил в соцсетях, цели настроены только у чуть больше чем 40% веб-мастеров.

Больше четверти опрошенных вообще не понимают, о чём речь, и что такое цели. Многие откладывают на потом.

Это нужно делать обязательно. Можно выбрать из перечисленных метрик самые важные и настроить свои цели. Сергей продемонстрировал, как это настроено на блоге devaka.ru:

Допустим, рассматриваются разные источники, по которым на сайт приходят посетители. Если настроена цель – смотрит ли человек страницу услуг, можно увидеть эффективность источника, понять, дает ли он рекламодателей или тех, кто интересуется услугами. Настраивая цели, можно более детально понять, какие запросы конвертируются и какие источники конвертируются. Это тоже важно.

2. Использование Excel и автофильтров.

Пример использования автофильтра для анализа ядра запросов:

Например, когда есть большое ядро, можно выделить различные типы запросов и с помощью автофильтров выделить только транзакционные.

Другой пример: с помощью Excel можно построить графики, выделить, какие добавки в ключевых словах являются наиболее значимыми или имеют большой потенциал.

Еще пример – электронные таблицы. Сергей рассказал, что именно их использовал после наложения «Пингвина» на сайт, чтобы посмотреть, какие страницы больше всего потеряли трафика. Сама методика может быть сложная, но электронные таблицы дают много возможностей.

3. Сопоставление дат.

О чём здесь речь? Например, когда анализировалось наложение фильтров на один крупный интернет-магазин, было выделено несколько сегментов:

• органика Яндекс
  
• органика Google

Рассматривалось, как изменялся трафик с этих поисковых систем, как сайт индексировался и сколько ошибок возникало.

Все эти даты сопоставлялись для того, чтобы понять – было ли связано падение трафика только с Гуглом и «Пингвином» или же Яндекс тоже из-за каких-то причин наложил санкции.

И если был виден какой-то всплеск или падение, можно было в каждой точке понимать, что было проведено. Таким образом, очень существенно облегчается анализ, можно легко определить, что именно повлияло на падение или взлет трафика.

4. Ведение заметок в Google Analitycs.

Если два раза кликнуть на график, появляется поле, где можно написать, что было сделано на данный момент. Например, был сделан 301-й редирект, изменилась CMS или алгоритм поисковой системы. Все это очень хорошо фиксировать в веб-аналитике.

Заключение

Даже простейший SEO-аудит может помочь вебмастерам избежать множества проблем с сайтом в будущем или понять, почему они уже возникли сейчас, и как их решить.

К сожалению, такие аудиты практикуют далеко не все, хотя их польза очевидна. Целью этого вебинара было желание донести до всех причастных мысль «Проводите и внедряйте аудиты!». Это эффективный инструмент оптимизации сайтов и их продвижения в поисковых системах.