Screaming Frog SEO Spider — это программа для компьютера, которая обходит сайт как поисковый робот и собирает по каждой странице технические данные для SEO-аудита.
Программу запускают локально на Windows, macOS или Linux. Вы вводите адрес сайта, она переходит по ссылкам и строит таблицу: адрес страницы, код ответа, Title, Description, H1, размеры изображений, ссылки внутри страницы, директивы индексации и многое другое. Бесплатная версия ограничена обходом 500 адресов, платная снимает ограничение и добавляет функции вроде интеграций с аналитикой и обхода страниц, которые строятся JavaScript. Условия лицензии смотрите на сайте разработчика.
Главное преимущество в том, что весь сайт виден как единая таблица. По ней можно быстро найти массовые проблемы, которые вручную искать не имеет смысла.
Что можно найти
- Страницы с кодами 404, 301, 302 и 5xx, см. Ошибка 404 и 301 редирект.
- Страницы без Title, без H1 или с дублирующимися значениями.
- Слишком длинные или короткие мета-описания.
- Страницы с директивой Noindex и с атрибутом Canonical.
- Битые ссылки, см. Битая ссылка.
- Цепочки редиректов, изображения без alt-текста.
Как провести проверку
- Введите адрес сайта и запустите обход.
- Дождитесь завершения и откройте вкладки с фильтрами: Response Codes, Page Titles, Meta Description, H1.
- Выберите проблемные группы, например «Missing» или «Duplicate».
- Экспортируйте данные в таблицу и расставьте приоритеты.
- После исправлений запустите обход ещё раз и сравните результаты.
Типичные ошибки
- Считать результат краулера полным аудитом. Программа показывает техническую сторону, но не оценивает спрос и контент.
- Обходить сайт без учёта настроек: робот может уйти в бесконечные фильтры и параметры.
- Не учитывать, что краулер видит не то, что поисковик: у Яндекса и Google свои данные об индексации. Сверяйтесь с Вебмастером и Search Console.
Чем отличается от Semrush и Ahrefs
Облачные платформы вроде Semrush собирают данные о конкурентах, ссылках и позициях. Screaming Frog точнее и гибче проверяет именно ваш сайт и работает на вашем компьютере.
Кому и когда это нужно
Программа нужна при аудите сайта, перед и после переезда или редизайна, при проверке редиректов и после крупных релизов. Разработчикам она помогает убедиться, что обновление не сломало теги и коды ответа, а контент-менеджерам — быстро найти страницы без заголовков или описаний. Для сайтов из нескольких страниц хватит и ручной проверки.
Частый вопрос
Есть ли бесплатная версия? Да, бесплатная версия обходит до 500 адресов, чего хватает для небольших сайтов. Для крупных проектов нужна платная лицензия.