Задать вопрос
Dejurin
@Dejurin
Software engineer
wget

Как просканировать сайт wget на наличие внешних ссылок?

Есть необходимость просканировать около 1000 страниц на наличие внешних ссылок на странице, куда копать и подойдет ли для этого wget ?
  • Вопрос задан
  • 139 просмотров
Комментировать
Подписаться 1 Оценить Комментировать
Пригласить эксперта
Ответы на вопрос 1
dimonchik2013
@dimonchik2013
non progredi est regredi
вообще гляньте вот это
home.snafu.de/tilman/xenulink.html

что касаестя wget - настройте зерклирование, выкачку только ХТМЛ страниц и возможность ходьбы по внешним ссылкам - тогда на локальном увидите, какие папки-домены он создаст

это - лучшая дока по dutn dbserv.pnpi.spb.ru/~shevel/Book/node103.html
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
Вакансии с Хабр Карьеры
Middle/Senior frontend dev
Solves
от 180 000 до 240 000 ₽
Разработчик Java (Middle/Senior)
ДИКСИ • Москва
от 150 000 до 270 000 ₽
Go Developer
Media Nation • Москва
от 300 000 ₽
Ещё вакансии
Заказы с Хабр Фриланса
Внести ряд корректив на сайте c Bitrix
18 апр. 2024, в 17:20
3000 руб./за проект
Дизайн сайта для web3 проекта
18 апр. 2024, в 16:43
50000 руб./за проект
Составление технических заданий для разработчиков
18 апр. 2024, в 16:41
10000 руб./за проект
Ещё заказы