Бесплатные инструменты массовой проверки HTTP кода ответа сервера

Бесплатные инструменты массовой проверки HTTP кода ответа сервера Инструментарий
На чтение 3 мин. Просмотров 8.6k. Опубликовано Обновлено

Содержание

Ответ страницы

Привет! Давно искал какой-нибудь инструмент для того, чтобы относительно массово проверять ответы страницы сайтов на код ответа сервера. Это были онлайн-сервисы, декстопный софт и даже попытка написать бота для парсинга этих заголовков (почти получилось).
Дабы облегчить жизнь в этом вопросе читателям моего блога, я решил сделать подборку этих инструментов и краткую аннотацию к ним.

Сервисы проверки ответа сервера:

Яндекс.Вебмастер

Яндекс.Вебмастер — это самый простой сервис, хотя и не для массовой проверки ответа сервера. Думаю, каждый владелец интернет-ресурса в России хоть раз пользовался этим инструментом.

  • Лимит 1 URL за проверку
  • Проверка URL на наличие в поиске Яндекс
Бесплатные инструменты массовой проверки HTTP кода ответа сервера.

Converseo

Converseo — простой сервис с помощью которого можно проверить 100 URL за раз. Есть возможность скачать результат в CSV.
  • Лимит 100 URL за проверку
  • Экспорт в CSV
Бесплатные инструменты массовой проверки HTTP кода ответа сервера.

Кулаков

Кулаков — этот сервис может проверить 500 URL за раз, есть возможность выбрать User Agent. Чтобы проверить 1000 ссылок, придётся добавлять список URL два раза. Кроме этого, ресурс имеет ещё массу полезных инструментов для SEO-оптимизатора.
  • Лимит 500 URL за проверку
  • Выбор User Agent
  • Учёт редиректов
Бесплатные инструменты массовой проверки HTTP кода ответа сервера.

SEOlium.com

SEOlium.com — хороший сервис для проверки HTTP кода. Всё в нем хорошо: добавляешь список в окно, нажимаешь кнопку, получаешь ответы. Только вот есть одно «но» — за сутки с одного IP можно снимать только 500 URL. Конечно, можно обойти эту проблему при помощи прокси или VPN, но кому нужны лишние телодвижения. Мы с коллегами решали эту задачу при помощи Tor Browser Bundle. Также можно попробовать встроенный VPN у Opera или плагин friGate
  • Лимит 500 URL с IP в сутки
Чти:   Эксперимент с индексацией в ПС Яндекс и Google
Бесплатные инструменты массовой проверки HTTP кода ответа сервера.
Простой многоцелевой парсер Xenu’s Link Sleuth находит битые ссылки, изображения, фреймы, фоновые рисунки и многое другое. Для проверки HTTP более чем достаточно. Выберите «File»→«Check URL List» и загрузите txt файл с необходимыми URL адресами для проверки.
  • Безлимитная проверка URL
  • Экспорт результатов
Бесплатные инструменты массовой проверки HTTP кода ответа сервера.

HEADMasterSEO

На данный момент, при необходимости массово проверить ответы сервера, я использую HEADMasterSEO. Можно сканировать по 500 URL за раз (в платных версиях больше). Софт учитывает редиректы, экспортирует в CSV, имеет возможность добавления URL из буфера обмена (Check URLs→Enter Manually), и ещё несколько других примочек.
  • Лимит 500 URL за проверку
  • Проверка время отклика
  • Проверка Sitemap на ошибки
  • Импорт/Экспорт в CSV и XML
Бесплатные инструменты массовой проверки HTTP кода ответа сервера.

Телеграм бот HTTP Status Checker

P.S.: нашел для Телеграм интересного бота от Сергея Кокшарова (Девака), который проверяет URL на отклик @httpstatusbot, есть возможность прикреплять в свои чаты.

Какими инструментами для массовой проверки HTTP кода ответа сервера пользуетесь вы?


Converseo HEAD Master SEO HTTP Status Checker SEOlium Xenu's Link Sleuth Бесплатная массовая проверка HTTP Кулаков Ответ страницы Сервисы проверки ответа сервера Яндекс.Вебмастер
Зацени
SEO блог BOLSHAKOF.RU
Ваше мнение

  1. SEOwoman

    Хорошая подборочка. Взяла на вооружение HEADMasterSEO и Tor.

    Ответить
    1. Большаков Александр автор

      Спасибо, ждите еще полезных SEO-шных инструментов.

      Ответить
  2. LoodJaf

    HEADMasterSEO сейчас стоит 12 к, буквально год назад он стоил 3к, возможно я путаю, хотя за этот срок особо ничего в софт не добавилось.

    Ответить
    1. Большаков Александр автор

      Попробуйте наГуглить скрипт для Гугл Таблиц, есть вероятность что там будет больше лимитов и бесплатно 🙂

      Ответить
    2. Алексей

      Очень сильно вырос уровень жизни в России и поэтому цены тоже. По телевизору так сказали.

      Ответить
  3. Татьяна

    Скажите, почему же нет парсера, в который можно вписать только url сайта, и он сам найдет все урлы внутри? (((

    Ответить
    1. Большаков Александр автор

      Есть 🙂 скачайте Ксену и он вам вытащит все ссылки, если у вас задача просто спарсить URL без кода ответа сервера, то можно попробовать этот сервис mikrorazmetka.ru/servis/sitemapxml/.
      Просто вбиваете карту сайта и он вам выпарсит все url из нее.

      Ответить
  4. Jofri

    Можно ещё на Зенке написать шаблончик и продавать тем кто нуждается 🙂

    Ответить
    1. Большаков Александр автор

      Если масштабы крупные — то почему бы и нет, хотя проще заказать макрос на кворке.

      Ответить
  5. Pavel

    Здравствуйте, вы знаете, что означают двойные точки перед параметром? Например:

    Request Headers
    :authority: xxx.com
    :method: GET
    :path: /api/data/v9.0/$metadata
    :scheme: https

    Я не знаю, что значит «:».

    Ответить
  6. @smirnov_seo

    С техническим аудитом проблем нет, все страницы сайта можно спайдерами распарсить, в том числе и представленными в статье, и все ошибки найти, а вот с радаром сложнее, поэтому свой написали: https://t.me/code_cheker_Bot

    Коротко: проверяет код ответа сервера URL с заданной периодичностью. Минимальный период пинга 10 мин, но по опыту, что каждые 30 минут самое то. Подробнее можно здесь почитать: https://t.me/smirnov_seo_blog/71

    Ответить