Задать вопрос
oe24y
@oe24y
php

Как в PHP curl при парсинге обработать минутный разрыв соединения?

Есть 100 000 URL-адресов.
Каждая из страниц парсится и из ее контента извлекается содержимое.
Но иногда пропадает интернет и все ломается.
Как обработать такое?
(парсинг ведется на Simple HTML DOM + Curl + Mysql)
  • Вопрос задан
  • 124 просмотра
Комментировать
Подписаться 1 Средний Комментировать
Пригласить эксперта
Ответы на вопрос 1
Jump
@Jump
Системный администратор со стажем.
Но иногда пропадает интернет и все ломается.
Как обработать такое?
Перед выполнением записывать какой запрос выполняете.
Если все сломалось запускаем со следующего, текущий в конец очереди, сообщение в лог.
Ответ написан
3 комментария
3 комментария
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
Вакансии с Хабр Карьеры
PHP разработчик
Ведисофт • Екатеринбург
от 25 000 ₽
PHP-разработчик
M-Social Production • Брянск
от 70 000 ₽
PHP Developer
YCLIENTS • Москва
от 200 000 до 350 000 ₽
Ещё вакансии
Заказы с Хабр Фриланса
Привязка к Маркетплейсам 1С Розница 2.3
20 апр. 2024, в 05:26
10000 руб./за проект
Дописать функцию на Flutter, работа с yandex map kit
20 апр. 2024, в 04:18
3000 руб./за проект
Английская версия для сайта на WordPress
20 апр. 2024, в 03:34
8000 руб./за проект
Ещё заказы