SpiderHead — SEO-краулер и набор аудита
Обойдите сайт, храните каждый скан, находите и приоритизируйте проблемы, передавайте задачи разработчикам, перепроверяйте исправления и собирайте отчёты. На вашей машине: в десктоп-приложении, в терминале или через ИИ-агента по MCP.
Нажмите, чтобы открыть полностью
Одно ядро, три лица
Десктоп-приложение, CLI и MCP-сервер вызывают одни и те же команды: обход, запущенный агентом, виден в окне приложения — и наоборот.
Десктоп-приложение
Нативное окно для macOS, Windows и Linux: проблемы, таблица URL, граф ссылок, проекты и инструменты с готовыми формами.macOS, Windows и Linux.
Десктоп-приложениеCLI
Скрипты, CI и работа в терминале. Каждая команда пишет доказательства, которые можно переоткрыть, выгрузить и пересчитать.
seohead crawl-site --url ...MCP-сервер
Локальный stdio-сервер для Claude и других агентских клиентов. Агент обходит сайт, делает аудит и передаёт задачи с теми же доказательствами.Для Claude и других агентских клиентов.
MCP-сервер для SEOОт первого обхода до перепроверки
Настоящие экраны приложения. Нажмите на картинку, чтобы открыть её полностью.
Старт с одного URL — и обход на глазах
Введите URL и нажмите «Старт». Живой прогресс, заполняющаяся таблица URL и обзор сканирования — проект не нужен, пока вы не решите его сохранить.
- Вежливый по умолчаниюОколо двух запросов в секунду на хост, только чтение.
- ПродолжаемыйПрерванный обход продолжается с места остановки.
- HTTP или рендерChromium — только когда странице нужен JavaScript.
Проблемы с доказательствами, а не догадки
182 проверки над одними и теми же данными. Каждая находка показывает затронутые URL, где проблема на странице и статус перепроверки.
- По приоритетуКритичное, важное и подсказки — со счётчиками по проверкам.
- Не бывает ложных «чисто»Находка, прошла чисто, пропущена или упала — всегда указано.
- Клик — и это задачаОтправьте находку прямо в бэклог разработчикам.
Каждый URL со всеми деталями
Таблица URL с фильтрами: статус, индексируемость, глубина, ссылки. Откройте URL — увидите заголовки, редиректы, структурированные данные и историю.
- Фильтры складываютсяHTTP-класс, тип, глубина, свои условия.
- ПроисхождениеКакой скан и какой источник это сказал.
- История URLОдин и тот же URL во всех сохранённых сканах.
До и после — рядом
Сравните два скана: что исправлено, что ухудшилось, что появилось. Задачи закрываются сами, когда доказательства это подтверждают.
- Разница по метрикам и сегментамСлова, ссылки, статусы — по разделам сайта.
- Проверка исправленийПовторные проверки с журналом устранения.
- МиграцииСтарый и новый наборы URL сопоставлены и проверены.
Задачи, за которые возьмётся разработчик
Проект хранит цель, согласованные задачи, следующие шаги и историю. Люди и агенты работают по одному списку.
- Цель и прогрессСогласованные задачи, покрытие страниц, подтверждённые исправления.
- Передача агентуАгент берёт следующий шаг — с доказательствами.
- Полная историяКто двигал задачу и почему.
Поиск и аналитика рядом с обходом
Search Console, GA4, Яндекс Метрика и Вебмастер, CrUX — только чтение, с локальной историей и журналом трат для платных провайдеров.
- Ваши ключиПлатные провайдеры запускаются только с вашим ключом и подтверждением.
- Связано с URLКлики и показы рядом с каждой находкой.
- Логи сервераЧто боты реально обходят.
Видно, как сшит сайт
Внутренние ссылки по разделам, страницы-сироты и пути — из того же сохранённого скана, что использует аудит.
- Разделы и глубинаКлики от главной, цвет по разделам.
- СиротыСтраницы, куда не ведёт ни одна внутренняя ссылка.
- ПутиКак краулер проходит из точки А в точку Б.
Исправить, выгрузить, отчитаться
У каждого основного инструмента готовая форма. Сожмите тяжёлые картинки, соберите 301-е — и выгрузите XLSX, DOCX, CSV или PDF для людей.
- Конвейер картинокWebP/AVIF, размеры, редиректы и задача.
- Отчёты клиентамФорматирует существующие доказательства, ничего не выдумывает.
- Каталог инструментовПоиск по любому инструменту и запуск на скане.
161 команда, один набор
Кроме обхода и аудита: подбор ключевых слов, оптимизация картинок, разведка домена, свои источники данных, мониторинг и выгрузка для BI.
Ключевые слова и семантика
Собрать, почистить, кластеризовать и растить пул запросов проекта.
Оптимизация картинок
Найти тяжёлые изображения, сжать, WebP/AVIF, 301-е.
Разведка домена
Стек, CDN, зеркала, поддомены, история Wayback.
Свои источники данных
Ваши CSV, XLSX или JSON как доказательства рядом с обходом.
Мониторинг
Регулярные разовые проверки с локальной доставкой.
Выгрузка в BI
Типизированные CSV-партиции для Sheets и BigQuery.
Журнал устранения
Кейсы, перепроверки и история подтверждений.
Все возможности
161 команда · 170 MCP-инструментов · 182 проверки
Дайте агенту краулер
Подключите локальный MCP-сервер один раз. Claude — или любой MCP-клиент — получает 170 инструментов, которые обходят, проверяют и отчитываются с теми же доказательствами, что и приложение.
seo_crawl_siteОбход со стартового URLseo_site_auditЗапустить проверки аудитаseo_compare_crawlsСравнить два сканаseo_gsc_queryДанные Search Consoleseo_report_buildXLSX, DOCX, PDFПять исправлений по влиянию
- Сократить цепочки редиректов у карточек каталога
- Исправить внутренние ссылки на 404
- Добавить canonical на страницах пагинации
- Сократить тайтлы длиннее 60 символов
- Сжать картинки тяжелее 300 КБ
Пример вывода. Задачи сохраняются в проект вместе с доказательствами.
Три команды до отчёта
Python 3.10 или новее. Склонируйте репозиторий, установите в виртуальное окружение и запустите:
seohead crawl-site --url https://example.com \
--max-urls 500 --scan-out ./scans/audit.sqliteБесплатно, локально и вежливо: около двух запросов в секунду на хост. Лимит URL — явный бюджет.
seohead sf run --exports-dir ./sf-exports \
--out ./report --tasksУже есть выгрузки Screaming Frog? Разберите их офлайн — без лицензии и без запросов к сайту.
seohead report-build --audit ./scans/audit.sqlite \
--format xlsx --out report.xlsxРабочая таблица или документ для клиента. Форматирует доказательства и не выдумывает находки.
