Статья также доступна на украинском (перейти к просмотру).

Содержание:

• Проверка на дублирование мета тегов TITLE да DESCRIPTION, а также заголовки-подзаголовки H1-H2
• Дублирование контента
• Сканирование сайта на код ответа сервера
• Аудит изображений (alt-теги, размер)
• Аудит мобильной версии сайта
• Коды ответа сервера при сканировании карты сайта Sitemap.xml
• Как проверить данные о внешних ссылках
• Интеграция Screaming Frog с Google Analytics, Google Search Console и PageSpeed Insights
• Вывод
• Использование регулярных выражений для фильтрации данных

Screaming Frog SEO Spider – мощный инструмент для аудита и оптимизации сайтов, что помогает улучшить их поисковые показатели.

В этой статье мы рассмотрим ключевые возможности программы, включая анализ контента, мобильная оптимизация, аудит внешних ссылок и интеграция с другими SEO инструментами для эффективной оптимизации.

Проверка на дублирование мета тегов TITLE да DESCRIPTION, а также заголовки-подзаголовки H1-H2

С помощью этого сервиса Вы сможете проверить сайт на наличие дублирования title, description, h1-h2.
Потому что, если Вы их допустите, это станет одной из главных причин пессимизации выдачи.

Для поиска дубликатов воспользуйтесь вкладками в верхней панели: Page Titles, Meta description, H1 и H2. Кликните раздел Duplicate.

Также можно отфильтровать мета теги, размер которых превышает определенное количество знаков. Для Тайла длина должна быть до 70 знаков, хотя это значение может изменяться

Для исправления этой ошибки нужно убрать эти дубли вручную или настроить их генерацию.

Дублирование контента

Контент – это не сами мета теги, это вся информация на сайте в первую очередь

Теперь поговорим не только о мета тегах и медиа файлах, но и о дублировании текстов на сайтах. При дублировании поисковой системе будет сложнее определить релевантную страницу.

Благодаря этой функции мы сможем находить не только полные дубли на сайте, но и страницы с похожим контентом по заданным параметрам: на 90, 80, 70% и т.д.

Рассмотрим алгоритм действий по этой проверке:

1. В верхнем меню перейдите Configuration-Content-Duplicates

2. Ставим галочку возле Enable Near Duplicates. По умолчанию Near Duplicates Threshold установлено 90%. Но вы можете регулировать этот показатель по собственному желанию.

После этого начинаем парсить.

3. Далее переходим к вкладке Content.

И анализируем колонку "Closest Similarity Match" степень сходства дубликатов контента.

4. В нижнем меню кликните дублирующие Duplicate Details.

Но следует помнить о сквозных блоках. Это шапка с номером телефона или популярные товары. Поэтому такие ключевые слова нужно удалить.

Для этого можно использовать CSS разметку. Например: номер контактного телефона в HTML верстке сайта <div class="number"> имеет класс тега "number".

Заходим в главном меню: Configuration – Content – Content Area.

И исключаем тег класса number из анализа.

После этого поиск дубликатов контента станет более рациональным и без учета сквозных блоков.

Сканирование сайта на код ответа сервера

Страницы, посещаемые пользователем, должны загружаться правильно и быстро.

Поэтому ответ сервера при сканировании страниц должен быть – 200.

На сайте могут быть найдены внутренние УРЛы, отдающие ответ серверу 3xx, 4xx или 5xx.

Для устранения этой ошибки удалите эти страницы или исправьте ошибки с этими ответами сервера, чтобы был код ответа 200.

Ознакомиться со статьей “Что такое страницы ошибок HTTP?”.

С ответом сервера Redirection (3xx) могут быть свои нюансы.

Все следует рассматривать отдельно.

Аудит изображений (alt-теги, размер)

Оптимизация изображений и других медиафайлов играют ведущую роль в повышении опыта пользователя, видимости сайта и, как следствие, улучшении поисковых результатов.

Оптимизация изображения это как технический аспект (например скорость загрузки), так и контентный (уникальное и оптимизированное описание).

Алгоритм действий по аудиту изображений с помощью Screaming Frog SEO Spider:

1. После парсинга сайтов в верхней панели перейдите на вкладку “Images”.

2. Далее сверху кликаем вкладку "Size" и отсортируем картинку по размеру от самой большой до самой маленькой. Анализируем изображения более 100 KB. Но если нужно, оптимизируем их размер.

3. Также с помощью фильтров справа в разделе Content отсортируем изображения по атрибуту ALT и другим параметрам. Отслеживаем наличие ошибок.

Рекомендуем ознакомиться со статьей “SEO оптимизация изображений и оптимизация скорости загрузок”.

Аудит мобильной версии сайта

Мобильная оптимизация стала критически важной для сайтов, поскольку значительная часть пользователей Интернета использует мобильные устройства для доступа к веб-сайтам.

Этот сервис может парсить мобильную версию сайта и как отдельную от desktop.

Настройка Screaming Frog под аудит мобильной версии:

• Выделите «Configuration» > «User Agent».

• Выберите User-Agent на сайте устройства, например Googlebot Smartphone.

Рекомендуем ознакомиться со статьей “Как оптимизировать мобильную версию сайта для использования с мобильных устройств”.

Коды ответа сервера при сканировании карты сайта Sitemap.xml

Код ответа сервера должен быть 200 также на карте сайта sitemap.xml.

Это стандартно. Но есть и исключения, они должны быть учтены оптимизаторами.

Разберемся, как нужно проверить карту сайта:

1. В Главном меню щелкните вкладку MODE и выберите подпункт LIST.

2. Далее переходим к вкладке сверху UPLOAD - DOWNLOAD SITEMAP;

3. В открывшемся окно забиваем адрес сайта, карту sitemap.xml мы хотим просканировать.

В следующем формате: https://www.example.com.ua/sitemap.xml

4. Анализируем коды ответа сервера.

В данном случае все коды ответа – 200.

Как проверить данные о внешних ссылках

Рассмотрим, как проверить Ваш сайт на качество внешних ссылок. В частности, на ссылку с кодом 4xx или ссылок с редиректом 3xx.

1. После анализ в верхнем меню перейдите на вкладку "external".

2. А в нижнем во вкладку “Inlinks”, чтобы Вы могли узнать, на какой странице сайта находится интересующая Вас исходная ссылка.

3. Далее отсортируйте исходящие ссылки по коду ответа сервера "status code".

4. Проанализируйте причины наличия битых внешних ссылок и ссылки с редиректом.

Интеграция Screaming Frog с Google Analytics, Google Search Console и PageSpeed Insights

Интеграция Screaming Frog с Google Analytics и Google Search Console и другими SEO инструментами позволит получить более глубокое представление о состоянии сайта. Сделать аудит более системным и удобным.

Интеграция с Google Analytics

Благодаря интеграции с Google Analytics Вы получаете:

• Данные о посещаемости страниц.

• Анализ поведения пользователей на сайте.

• Выявление страниц с высокими показателями отказов.

Подключение Google Analytics

• Откройте Screaming Frog и зайдите в Configuration - API Access > Google Analytics 4.

• Нажмите кнопку «Sign in with Google» и войдите в свой аккаунт Google Analytics.

• Выберите метрику для анализа.

• Нажмите «OK», чтобы сохранить настройки.

• Запустите сканирование вебсайта.

• После завершения сканирования перейдите на вкладку "Google Search Console", чтобы увидеть данные поисковых запросов, кликов, показов и т.д.

Интеграция с Google Search Console

Благодаря интеграции с Google Search Console Вы получаете:

• Получение данных о поисковых запросах, по которым пользователи посещают сайт.

• Анализ кликов, показов, CTR и средней позиции в поисковой выдаче.

• Выявление проблем с индексацией и исправление их. К примеру влияние блэк аутов на SEO показатели.

Подключение Google Search Console

• Выделите "Configuration" > "API Access" > "Google Search Console".

• Нажмите "Войти через Google" и войдите в свой аккаунт Google.

• Разрешите доступ Screaming Frog к данным Search Console.

• Выберите нужный сайт (property) из списка.

• Настройте фильтры для импортируемых данных, например временный период или тип устройства.

• Запустите сканирование вебсайта.

• После завершения сканирования перейдите на вкладку "Google Search Console", чтобы увидеть данные поисковых запросов, кликов, показов и т.д.

Интеграция с PageSpeed Insights

Благодаря интеграции с PageSpeed ??Insights Вы сможете интегрировать данные о скорости загрузки в общий аудит, что позволит более удобно работать с этим. сервисом.

Подключение PageSpeed ??Insights

• Выделите Configuration > API Access > PageSpeed ??Insights.

• Введите ключ API от Google PageSpeed ??Insights. Получить его можно в Google Cloud Platform.

• Выберите параметры анализа.

• Запустите сканирование сайта.

• После завершения сканирования перейдите на вкладку "PageSpeed" для просмотра данных о скорости загрузки.

Вывод

Из вышеперечисленного можно сделать вывод, что Screaming Frog является мощным и гибким инструментом SEO анализа сайтов.

Рассмотрим краткое возможности Screaming.

Анализ структуры сайта и контента

• Анализ мета тегов (Title, Description). На корректность, количество знаков, дублирование.

• Анализ контента, его дублирование.

• Анализ изображений и атрибутов ALT.

• Проверка наружных и внутренних ссылок. Поиск ссылок с кодом ответа на сервер (200, 3xx, 4xx).

Мобильная оптимизация

Проверка мобильной версии сайта и выявление проблем, влияющих на опыт пользователя.

Интеграция с другими SEO инструментами

Хотя сам по себе не полностью универсален, и требует подключения к себе других сервисов. Но такое подключение позволяет унифицировать данные из разных сервисов.

Вы можете подключить сервисы с передачей данных: Google Analytics, Google Search Console, PageSpeed Insights и т.д.

Также можно экспортировать полученные данные в виде отдельных файлов.

Рекомендации по дальнейшему использованию

Рекомендуем придерживаться следующих действий:

• Регулярно обновляйте версии сервиса Screaming Frog и изучайте новые функции и обновления.

• Посещайте вебинары и учите видео уроки.

• Учите возможность интеграции с новыми SEO инструментами для создания комплексных рабочих процессов.

• Экспериментируйте с различными настройками и конфигурациями, чтобы выработать оптимальные подходы к продвигаемым проектам.

• Присоединяйтесь к профильным совместно, делитесь опытом и советами.

Использование регулярных выражений для фильтрации данных

Регулярные выражения (regex) позволяют создавать мощные

фильтры для поиска и анализа данных

Это особенно полезно при работе с большими сайтами и большим объемом данных.

Использование продвинутых функций Screaming Frog, таких как регулярные выражения для фильтрации данных, обычай настройка и конфигурация, а также автоматизация задач и планирование сканирования позволяет значительно упростить и улучшить процесс SEO-оптимизации сайта. Эти инструменты помогают эффективно управлять большими объемами данных и поддерживать сайт в актуальном и оптимизированном состоянии.

Недавно прослушал вебинар от Devaka (Сергей Кокшаров) по указанной теме.

Рекомендуем посмотреть видео семинар на тему “Как собирать нужные данные с сайта с помощью Screaming Frog”, в ней разбирается применение регулярных выражений.

Подписывайтесь на наш телеграм-канал https://t.me/freehostua, чтобы быть в курсе новых полезных материалов

Смотрите наш канал Youtube на https://www.youtube.com/freehostua.

Мы в чем ошиблись, или что-то пропустили?

Напшите об этом в комментариях, мы с удовольствием ответим и обсуждаем Ваши замечания и предложения.

Дата: 03.07.2024 Автор: Яременко Владислав под редакцией Евгения Шермана #seo#seo-audit#seo-services

Голосование 1 2 3 4 5