Как удалить из базы мертвые сайты?

Если у Вас есть не совсем свежая база каталогов, форумов, блогов и т.д. (ресурсов на которых можно оставить ссылку), то для экономии своего времени и более эффективного прогона, необходимо удалять «мертвые» ресурсы.

Сделать это можно с помощью проверки страниц на ответ сервера. Страницы которые вернули 404 скорее всего являются «мертвыми». Для более точной проверки необходимо проверить несколько раз, через определенный промежуток времени.

Приведу пару инструментов позволяющих получить ответы от сервера.

Инструмент от 4seo.biz. Позволяет массово проверить страницы на 404 ошибку. Все просто, вводите список url, нажимаете «Отправить» и ждете завершения работы скрипта. По завершению работы Вы получите данные вида ответ-список url. Скрипт проверяет (200, 404, 301, 403 и т.д.).

Стоит отметить, что кроме этого инструмента на сайте http://4seo.biz Вы найдете еще очень много полезных скриптов (массовая проверка ТИЦ и PR, массовая проверка доменов на занятость, проверка позиций сайта, скрипты для работы с текстом и т.д.).

Перед тем, как рассказать о десктопной программе для проверки ответов сервера, хочу порекомендовать фотобанк shutterstock для желающих заработать на продаже фото.

HttpAnswer. Десктопный чекер ответов сервера. Необходимо задать исходный файл с url и нажать «Старт». Программа прочекает урлы и разложит их по файликам в зависимости от ответа сервера. Работает очень быстро. Идеально подойдет для проверки нескольких тысяч url.

Скачать программу можно с сайта автора http://solutionfix.org/soft/httpanswer/

1 звезда2 звезды3 звезды4 звезды5 звезд. Супер! (3 оценок, в среднем: 5,00 из 5)
Загрузка...
  • Да, интересная программа, скажу своему технику, чтоб посмотрел 🙂

  • Спасибо за интересную и содержательную статью! Сегодня прогоню свою базу