Вышла 20 версия Screaming Frog SEO Spider
Screaming Frog, один из наиболее широко используемых инструментов SEO специалистами по всему миру, вчера обновился до 20 версии, которая содержит много нововведений, а также принесет проблемы пользователям активирующим софт через кейген.
Информация для тех, кто использовал нелицензионную версию лягушки: кейген больше не будет работать. При обновлении с более ранней версии, активированной кейгеном, активация также слетит. Стоимость лицензии – 259$ в год.
Версию 19.8, предшествующую 20-й можно найти в Телеграм у Андрея Буйлова https://t.me/bez_seo.
Основные нововведения
1. Возможность выполнения кастомного JS во время краулинга
JS даёт широчайшие возможности по парсингу, пост обработке контента и интеграции с любым сторонним API, который не поддерживается в Screaming Frog «из коробки».
Более того, сразу есть готовые пресеты, среди которых:
Интеграция с Chat GPT (об этом подробнее ниже)
Обработка событий при наведении курсора мыши
Скроллинг страниц
- Возможность загрузки и сохранения контента локально
2. Использование Chat GPT
Интеграции с API ChatGPT уже есть в готовых JS шаблонах. На самом деле это не интеграция именно с ChatGPT, а поддержка API OpenAI.
На мой взгляд это одна из наиболее крутых фишек для предварительного массового анализа страниц.
Среди пресетов уже есть:
Извлечение эмбеддингов из контента страницы (используется модель text-embedding-3-small)
Генерация ALT текстов для картинок (модель gpt-4-vision-preview)
- Генерация ALT текстов для картинок на странице (модель gpt-4-vision-preview)
Определение интента страницы (gpt-3.5-turbo)
- Определение языка страницы (gpt-3.5-turbo)
Определение сентимента страницы (gpt-3.5-turbo)
В редакторе JS кода сразу зашиты готовые промпты, температура, название модели и другие параметры. При необходимости всё это можно изменить под собственные задачи.
В редактор придется лезть в любом случае, как минуму для вставки API ключа.
3. Проверка страниц на Mobile Friendly
Configuration > API Access > Page Speed Insights.
На вкладке Metrics включить соответствующие параметры для сбора.
Напомню, в декабре 2023 года Google отключил свой инструмент Mobile Friendly Test и предложил использовать Lighthouse вместо него, что крайне неудобно для массового выявления проблемных страниц.
4. Возможность локального сбора Lighthouse данных
Теперь можно собрать данные о загрузке страниц локально, без подключения к Page Speed Insights API. При этом данные CrUX (Chrome User Experience Report) будут недоступны.
5. Анализ N-грамм
Предусмотрен анализ по зонам:
- Текст страницы (body text)
- Заголовки
- Анкоры входящих ссылок
- Alt тексты входящих ссылок
Для анализа N-грамм в настройках Config > Spider > Extraction должено быть включено Store HTML и Store Rendered HTML.
Кроме этого, добавлены новые новое представление на вкладки Inlinks и Outlinks, которое содержит информацию о распределении анкорных текстов для каждой страницы.
Могу сказать, что лично для меня наиболее интересной является добавление поддержки кастомного JS. Почти весь остальной функционал – это то, что уже использовалось большинством SEO специалистов для обработки данных из Screaming Frog в эксель или с применением сторонних сервисов.
Мой Телеграм канал