Проверка и контроль URL сайта
Если сайт состоит из большого количества страниц, то проверка URL сайта может превратиться в невыполнимую рутину для оптимизатора. Чтобы минимизировать временные затраты, можно воспользоваться специальными программами. Один из таких инструментов, который наверняка знаком опытным специалистам, – программа Xenu`s Link Sleuth.
Скачать бесплатно программу Xenu`s Link Sleuth
Чтобы проверить сайт, необходимо открыть новый проект, выбрав в меню «File» «Check URL», ввести адрес и нажать «OK». После этого программа начнет обработку всех URL сайта. По окончании проверки нужно экспортировать полученные данные в любой удобный редактор и начать поиски дублей.
По результатам исследования заданного URL сайта Xenu выдает HTML-отчет.
Он очень подробный и состоит из нескольких разделов:
• Неработающие ссылки, отсортированные по адресам (URL).
• Неработающие ссылки, отсортированные по страницам, на которых они встречаются.
• Ссылки, которые работают, но с помощью функции редиректа перенаправляют посетителей на другие страницы. Редирект замедляет загрузку страниц, поэтому в некоторых случаях имеет смысл поставить ссылку сразу на прямой адрес.
• Ссылки протоколов FTP и Gopher. Xenu, к сожалению, не проверяет такие ссылки на работоспособность. Однако, имея их полный список под рукой, пользователь может проверить их самостоятельно, вручную.
• Список страниц, которые можно сообщить поисковым интернет-системам для индексации.
• Карта (оглавление) сайта, в которой указаны не URL страниц, а их заголовки, то есть, содержимое тега <TITLE>.
• Неработающие внутренние ссылки, то есть ссылки, которые должны вести на какие-то страницы нашего же сайта, а ведут "в никуда".
• Список файлы-сирот (orphan).
• Обобщенная статистика исследования: сколько ссылок получили тот или иной статус в результате проверки.