Почему я использую Screaming Frog SEO Spider На заре своего п | SEO-ракета: Google - каждый день
Почему я использую Screaming Frog SEO Spider
На заре своего пути в коммерческом SEO предо мной не стоял выбор подходящего краулера. Просто однажды более опытный коллега мне предложил поставить Screaming Frog SEO Spider ("лягушку") для проведения технического аудита. Интерфейс выглядел довольно жестко для новичка, а потому я использовал его крайне посредственно, без каких бы то ни было настроек — просто вбил адрес сайта и запустил сканирование
Затем возникали новые задачи для решения которых мне начали советовать и другие краулеры:
Netpeak Spider для расчета Page Rank;
Comparser для учета информации из индекса поисковых систем;
Xenu's Link Sleuth для сбора битых ссылок (да, серьезно).
Спустя какое-то время я решил для себя покопаться во всех настойках лягушки и нашел что там есть не только смена User-Agent и проверка Sitemap, но и куча настроек сканирования, парсинга, рендеринга JavaScript и ещё много всяких полезных отчетов. И в итоге совсем перестал использовать другие краулеры, притом расширив свой список возможностей по анализу сайта (за счет более глубокого изучения лягушки).
Время шло, моя должность менялась и появлялись ассистенты. Самый большой урок при их обучении у меня был не по текстовой релевантности или ссылкам, а по техническому аудиту в Screaming Frog SEO Spider. После него ассистенту нужно было сформировать сам файл аудита сайта, что было пожалуй самым сложным и трудоёмким среди всех задач в рамках обучения.
Сегодня мне кажется будто лягушка не такой уж большой инструмент и можно ещё много всего было бы сделать. Но когда смотришь на некоторые её аналоги — это ощущается как-будто ты после Aston Martin смотришь на колымагу из рисунков в детстве..
А ещё разработчики вполне себе хедлайнеры на рынке: они регулярно выкатывают обновы и создают уникальный функционал. Не так давно у них появился функционал сравнения (выручает при переезде сайта), а также проверка данных URL из индекса через Search Console.
