Вышла 20 версия Screaming Frog SEO Spider

Вышла 20 версия Screaming Frog SEO Spider

Screaming Frog, один из наиболее широко используемых инструментов SEO специалистами по всему миру, вчера обновился до 20 версии, которая содержит много нововведений, а также принесет проблемы пользователям активирующим софт через кейген.

Информация для тех, кто использовал нелицензионную версию лягушки: кейген больше не будет работать. При обновлении с более ранней версии, активированной кейгеном, активация также слетит. Стоимость лицензии – 259$ в год.

Версию 19.8, предшествующую 20-й можно найти в Телеграм у Андрея Буйлова https://t.me/bez_seo.

Основные нововведения

1. Возможность выполнения кастомного JS во время краулинга

JS даёт широчайшие возможности по парсингу, пост обработке контента и интеграции с любым сторонним API, который не поддерживается в Screaming Frog «из коробки».

Более того, сразу есть готовые пресеты, среди которых:

  • Интеграция с Chat GPT (об этом подробнее ниже)

  • Обработка событий при наведении курсора мыши

  • Скроллинг страниц

  • Возможность загрузки и сохранения контента локально
Вышла 20 версия Screaming Frog SEO Spider

2. Использование Chat GPT

Интеграции с API ChatGPT уже есть в готовых JS шаблонах. На самом деле это не интеграция именно с ChatGPT, а поддержка API OpenAI.

На мой взгляд это одна из наиболее крутых фишек для предварительного массового анализа страниц.

Среди пресетов уже есть:

  • Извлечение эмбеддингов из контента страницы (используется модель text-embedding-3-small)

  • Генерация ALT текстов для картинок (модель gpt-4-vision-preview)

  • Генерация ALT текстов для картинок на странице (модель gpt-4-vision-preview)
  • Определение интента страницы (gpt-3.5-turbo)

  • Определение языка страницы (gpt-3.5-turbo)
  • Определение сентимента страницы (gpt-3.5-turbo)

В редакторе JS кода сразу зашиты готовые промпты, температура, название модели и другие параметры. При необходимости всё это можно изменить под собственные задачи.

В редактор придется лезть в любом случае, как минуму для вставки API ключа.

Вышла 20 версия Screaming Frog SEO Spider

3. Проверка страниц на Mobile Friendly

Configuration > API Access > Page Speed Insights.

На вкладке Metrics включить соответствующие параметры для сбора.

Вышла 20 версия Screaming Frog SEO Spider

Напомню, в декабре 2023 года Google отключил свой инструмент Mobile Friendly Test и предложил использовать Lighthouse вместо него, что крайне неудобно для массового выявления проблемных страниц.

4. Возможность локального сбора Lighthouse данных

Теперь можно собрать данные о загрузке страниц локально, без подключения к Page Speed Insights API. При этом данные CrUX (Chrome User Experience Report) будут недоступны.

5. Анализ N-грамм

Предусмотрен анализ по зонам:

  • Текст страницы (body text)
  • Заголовки
  • Анкоры входящих ссылок
  • Alt тексты входящих ссылок
Вышла 20 версия Screaming Frog SEO Spider

Для анализа N-грамм в настройках Config > Spider > Extraction должено быть включено Store HTML и Store Rendered HTML.

Кроме этого, добавлены новые новое представление на вкладки Inlinks и Outlinks, которое содержит информацию о распределении анкорных текстов для каждой страницы.

Могу сказать, что лично для меня наиболее интересной является добавление поддержки кастомного JS. Почти весь остальной функционал – это то, что уже использовалось большинством SEO специалистов для обработки данных из Screaming Frog в эксель или с применением сторонних сервисов.

66
8 комментариев

Нашли ли какие-то решения по кейгенам/активаторам?
нет возможности платить из России иностранным юрлицам.

2
Ответить

Решение под мак есть у меня в канале https://t.me/HelloDigitalWorld/313 Тот же файл .jar и для Windows подходит. Постом выше

1
Ответить

проблемы пользователям активирующим софт через кейгенПлакать не станем. SiteAnalyzer не так крут, но тоже норм.

Ответить

А как же ритуал кормления лягушки? Я, заходя за обновкой, обязательно прокручивал страничку вниз и скармливал муху лягухе. Без этого как использовать-то. И кто теперь будет жабёныша кормить? Апдейты они обещали автоматические, нет необходимости кому-то заходить на сайт.
Это тревожно.

2
Ответить