Настройка Screaming Frog SEO Spider для сканирования сайтов
Делюсь одной из частей регламента для сотрудников, которая посвященна работе с программой Screamig Frog.
Настраиваем параметры программы Screaming Frog SEO Spider
Запускам программу и сразу вводим ключь активации
Важно! Программа должна быть активированная, чтобы просканировать весь сайт, а не только первые 500 страниц.
Далее, переходим к одному из методов настройке самой программы.
1. Загрузка настроек из готового файла конфигурации
Чтобы не разбираться в деталях настройки программы, загружаем скачанную конфигурацию на ПК и импортимуем настройки, которые подойдут в 90% случаев для сканирования практически всех сайтов.
- Готовая конфигурация для скачивания на ПК
Инструкция по импорту
1.1. Открываем меню: File → Configuration → load
1.2. Импортируем скаченный файл выше
1.3. Сохраняем загруженные настройки по умолчанию (будут применены при каждем открытии программы)
1.4. Проверяем, где будут храниться данные сканирования в ОЗУ или на жестком (System → Storage Mode) (могло снести при импорте)
1.5. Проверить сколько у вас установилось оперативной памяти для сканирования (могло снести при импорте)
Разработчики заявляют, что для хранения базы данных 4 ГБ ОЗУ позволят вам сканировать 2-3 миллиона URL-адресов, 8 ГБ ОЗУ позволят сканировать до 5 миллионов URL-адресов и 16 ГБ для 10 миллионов. Но, все это — приблизительные значения, так как зависит от типа сайта.
Рекомендуемое значение программой, будет указано в скобках (пример на скрние ниже в скобках: 14GB maximum allowed). Задать самостоятельно можно будет в окошке (у себя указал 10 GB)
Я отдаю ~60% от общего объема, чтобы не зависал компьютер. Пример на скрине. После указанных значений, нажимаем ОК.
1.3. Сохраняем загруженные настройки по умолчанию (будут применены при каждем открытии программы)
1.5. Перезагружаем программу, запускаем парсинг нужного сайта.
💡 Проверка задачи (самопроверка)
- Скачали файл конфигурации программы и импортировали его
- Проверили на всякий случай п. 1.4 и 1.5., если импорт снес, установлии свои значения
- Сохранили импортированные настройки, чтобы каждый раз не настраивать
- Перезагрузили программу, запустили парсинг нужного сайта
2) Ручная настройка (если нужно настроить под себя)
2.1. Запускам программу и открываем настройки: Configuration
2.2. Выбираем где хранить данные в ОЗУ или на жестком (System → Storage Mode)
2.3. Выбираем место, где будут храниться данные сканирования
Выбрать:
1) Database Store
2) Указать путь, где будут на жестком диске храниться данные парсинга (при желании)
3) Нажать кнопку: Ок, для сохранения изменений
2.4. Увеличиваем оперативную память для сканирования, чтобы не тупила программа
В зависимости от объема оперативной памяти на вашем компьтере (у меня 16 GB), вы можете задать значение самостоятельно.Чем больше объем, тем меньше будет тупить программа.Рекомендуемое значение программой, будет указано в скобках (пример на скрние ниже в скобках: 14GB maximum allowed).Задать самостоятельно можно будет в окошке (у себя указал 10 GB)
Я отдаю ~60% от общего объема, чтобы не зависал компьютер. Пример как у меня на скрине.После указанных значений, нажимаем ОК.
2.5. Сохраняем сделанные настройки конфигураци, чтобы открывались по умолчанию
2.6. Перезагружаем программу, она готова к работе
2.7. Переходим к сканированию сайта (ссылка на инструкию сканирования)
Важно! Если у вас очень большой проект (больше полу миллиона страниц), можно отключить ненужные параметры для сканирования. Пример настроек на скринах ниже. Поигравшись с настройками самостояльно, можно просканировать весь сайт.
💡 Проверка задачи (самопроверка)
- Программа настроена для сканирования сайтов
- Сохранили настройки, чтобы каждый раз не настраивать программу
- Перезагрузили программу, запустили парсинг нужного сайта
ХОТИТЕ УВЕЛИЧИТЬ ЗАКАЗЫ В 2-5 РАЗ ЗА 30 ДНЕЙ
и создать стабильную систему привлечения клиентов?
👇 Пишите в личные сообщения кодовое слово: «НастройкаFrogTM»
☝ Уточню кое какие вопросы, определим дату и время созвона по видео связи.
ЧТО ВЫ ПОЛУЧИТЕ ОТ КОНСУЛЬТАЦИИ?
1) За 10-15 минут проведу БЕСПЛАТНУЮ диагностику вашего бизнеса и отвечу на все ваши вопросы.
2) Расскажу, какие рекламные инструменты использовать для продвижения и сколько заказов вы получите исходя из вашего рекламного бюджета.
3.) Подарю аудит сайта стоимостью 5000 рублей — Берите, исправляйте технические ошибки и увеличивайте продажи.
Все это по записи в личных сообщениях
☝ В месяц на продвижение беру не более пяти новых проектов.Количество бесплатных диагностик: 10 шт на месяц. Есть ли места, уточняйте в личных сообщениях.
—-
Telegram: https://t.me/tolstenkoaa
WhatsApp: https://wa.me/79112996909
TG «Толстенко PRO Маркетинг»: https://t.me/+V6SQiv8gcwoyMmUy
ВК: https://vk.com/tolstenkoaa
Рутуб https://rutube.ru/channel/37807177/
Ютуб https://www.youtube.com/channel/UCP9el99pUCTNIZwc0O_6FlQ/
ЧАСТО ЗАДАВАЕМЫЕ ВОПРОСЫ
Вы работаете с любыми бизнесами?
Нет. Беру в работу только прозрачные бизнесы и сайты, где уверен, что смогу показать рост позиций, трафика и заявок.
Мне нужно постоянно контролировать процесс и быть вовлеченным?
Нет, вашего участия потребуется минимум. Работа организована так, чтобы освободить вам максимум времени, а всю работу по продвижению мы берем на себя.
Вы работаете по договору?
Да, я работаю как ИП и всегда заключаю официальный договор, также используется ЭДО для документооборота.
Каждый месяц мы готовим индивидуальный план с подробным описанием задач. Вы точно знаете, какие работы выполняются, чтобы увеличить количество заявок.
А что, если у нас пока нет бюджета на продвижение?
Я работаю гибко — всегда можно подобрать решение под реальные возможности бизнеса. Когда мы увидим рост трафика и заявок в Метрике, сможем пересмотреть объем работ и масштабировать поток заявок.
Если сейчас бюджета нет, на консультации покажу, какие действия можно сделать без вложений или с минимальными затратами, чтобы получить первые заявки.
Часто проблема не в бюджете, а в том, что текущий маркетинг работает неэффективно.
Как я буду понимать, что над проектом идет работа?
При старте работ, создам рабочий чат по вашему проекту.
Вы сможете в любой момент следить за продвижением, задавать вопросы специалистам и видеть статус задач в реальном времени.
В конце месяца отправляем отчет с реальными данными из Метрики: трафик, количество заявок и ключевые показатели. Так вы полностью контролируете процесс и видите результат продвижения.
Какие гарантии вы даете, а если не сработает?
Единственная гарантия, которая 100% срабатывает — мы все рано или поздно умрем 🙂
А если серьезно: гарантий результата в маркетинге не существует.
Есть несколько факторов, которые влияют на конечный результат:
- качество и объем работ продвижения;
- скорость учета изменений поисковыми системами;
- скорость внедрения рекомендаций со стороны бизнеса;
- качество обработки заявок и продаж (узкое место многих проектов).
Но мы гарантируем качество работы: все задачи и сроки фиксируются в договоре, и мы их соблюдаем.
Сколько времени нужно, чтобы получить заявки?
Все зависит от инструментов и объема работ.
Реклама. Дает заявки сразу после запуска.
Через 2–4 недели можно оценить эффективность, когда накопится статистика и алгоритмы обучатся.
Стоимость заявки зависит от ниши, региона и конкуренции — в среднем от 1000 рублей и выше.
Главное преимущество рекламы: при правильно настроенной рекламе бизнес начинает получать стабильный поток заявок уже в первые недели работы.
SEO. Работает дольше, но в перспективе это самый стабильный и дешевый канал привлечения клиентов.
Первые результаты обычно видны через 2–3 месяца, устойчивый поток заявок формируется через 6–12 месяцев.
Главное преимущество SEO — стабильный поток клиентов, который не зависит от рекламы
и со временем снижает стоимость каждой заявки.

