Может ли не работать cURL из-за CloudFlare?

Question

Matthew Stafford @matthewstafford

Может ли не работать cURL из-за CloudFlare?

Всем привет! Сегодня подключил CloudFlare и может ли из-за него теперь не работать cURL? На локалке все окей, а тут никак вообще не идет.

Вопрос задан более трёх лет назад
620 просмотров

4 комментария

Подписаться 1 Простой 4 комментария

Пригласить эксперта

Ответы на вопрос 1

7 комментариев

Matthew Stafford @matthewstafford Автор вопроса

Вариант второй. На локалке все работало как часы, а на хостинге вообще никак не работает, никакого ответа от cURL нет, просто бесконечная загрузка страницы до таймаута и вывод ошибки connect() timed out!

Написано более трёх лет назад
Dimonchik @dimonchik2013

отладку включи

Написано более трёх лет назад
Александр Аксентьев @Sanasol Куратор тега PHP

Matthew Stafford, ну значит то что вы парсите недоступно с вашего сервера.

Например целевой сайт забанил страну/подсети датацентров чтобы его не парсили.

Написано более трёх лет назад
Matthew Stafford @matthewstafford Автор вопроса

Александр Аксентьев, а каким образом это можно узнать?

Написано более трёх лет назад

Matthew Stafford @matthewstafford Автор вопроса

dimonchik2013, там ничего кроме таймаута нет

$headers = Array(
	'accept' => 'text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8',
	'content-type' => 'application/x-www-form-urlencoded',
	'user-agent' => 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/46.0.2490.86 Safari/537.36'
);

$get_main_page = post('https://vk.com', Array(
	'headers' => Array(
		'accept: '.$headers['accept'],
		'content-type: '.$headers['content-type'],
		'user-agent: '.$headers['user-agent']
	)
));

function post($url = null, $params = null, $proxy = null, $proxy_userpwd = null) {
	$ch = curl_init();

	curl_setopt($ch, CURLOPT_URL, $url);
	curl_setopt($ch, CURLOPT_HEADER, 1);
	curl_setopt($ch, CURLOPT_RETURNTRANSFER, 1);
	curl_setopt($ch, CURLOPT_CONNECTTIMEOUT, 60);
	curl_setopt($ch, CURLOPT_SSL_VERIFYPEER, 0);
	curl_setopt($ch, CURLOPT_SSL_VERIFYHOST, 2);
	
	$fOut = fopen($_SERVER["DOCUMENT_ROOT"].'/'.'curl_out.txt', "w" );
	curl_setopt ($ch, CURLOPT_VERBOSE, 1);
	curl_setopt ($ch, CURLOPT_STDERR, $fOut );

	if(isset($params['params'])) {
		curl_setopt($ch, CURLOPT_POST, 1);
		curl_setopt($ch, CURLOPT_POSTFIELDS, $params['params']);
	}

	if(isset($params['headers'])) {
		curl_setopt($ch, CURLOPT_HTTPHEADER, $params['headers']);
	}

	if(isset($params['cookies'])) {
		curl_setopt($ch, CURLOPT_COOKIE, $params['cookies']);
	}

	if($proxy) {
		curl_setopt($ch, CURLOPT_PROXY, $proxy);

		if($proxy_userpwd) {
			curl_setopt($ch, CURLOPT_PROXYUSERPWD, $proxy_userpwd);
		}
	}

	if(!$result = curl_exec($ch)) {
		$result = curl_error($ch);
	}
	print_r(curl_getinfo($ch));
	$result_explode = explode("\r\n\r\n", $result);

	$headers = ((isset($result_explode[0])) ? $result_explode[0]."\r\n" : '').''.((isset($result_explode[1])) ? $result_explode[1] : '');
	$content = $result_explode[count($result_explode) - 1];

	preg_match_all('|Set-Cookie: (.*);|U', $headers, $parse_cookies);

	$cookies = implode(';', $parse_cookies[1]);

	curl_close($ch);

	return Array('headers' => $headers, 'cookies' => $cookies, 'content' => $content);
}

Написано более трёх лет назад

Александр Аксентьев @Sanasol Куратор тега PHP

Matthew Stafford, ну так если доступа нет на сайт, то и будет таймаут.

Узнать никак.
Пробовать через прокси.

Написано более трёх лет назад

Matthew Stafford @matthewstafford Автор вопроса

Александр Аксентьев, подключил прокси, отдал такой ответ:

* About to connect() to proxy 91.77.162.117 port 8080 (#0)
*   Trying 91.77.162.117... * connected
* Connected to 91.77.162.117 (91.77.162.117) port 8080 (#0)
* Establish HTTP proxy tunnel to login.vk.com:443
> CONNECT login.vk.com:443 HTTP/1.1
Host: login.vk.com:443
Proxy-Connection: Keep-Alive
accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/webp,*/*;q=0.8
content-type: application/x-www-form-urlencoded
user-agent: Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/46.0.2490.86 Safari/537.36

< <html>
< <head><title>400 Bad Request</title></head>
< <body bgcolor="white">
< <center><h1>400 Bad Request</h1></center>
< <hr><center>nginx</center>
< </body>
< </html>
* Proxy CONNECT aborted
* Closing connection #0

Написано более трёх лет назад

Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации

Похожие вопросы

PHP

+1 ещё

Простой
Почему ошибка 502 после миграции с PHP 8.2 на PHP 8.3?
- 1 подписчик
- час назад
- 61 просмотр
2

ответа
PHP

+1 ещё

Средний
Как получить телефон из Google OAuth 2.0 API?
- 1 подписчик
- 18 часов назад
- 42 просмотра
1

ответ
PHP

+1 ещё

Средний
Как запускать PHP в терминале Netbeans?
- 2 подписчика
- 18 часов назад
- 190 просмотров
0

ответов
PHP

+1 ещё

Простой
Где ошибка в коде при создании древа в sql из файла?
- 1 подписчик
- 19 часов назад
- 89 просмотров
0

ответов
PHP

+1 ещё

Простой
Как в php формировать ответ на AJAX XMLHttpRequest запрос?
- 1 подписчик
- вчера
- 103 просмотра
0

ответов
PHP

+2 ещё

Средний
Запросы soap в инфоклинику на php?
- 1 подписчик
- вчера
- 139 просмотров
2

ответа
PHP

Простой
Не работает часть скрипта PHP при смены PHP 7 на 8?
- 1 подписчик
- 22 апр.
- 211 просмотров
3

ответа
PHP

Средний
Как найти в массиве ответа API нужное значение, при том что значение может быть написано в разном регистре?
- 1 подписчик
- 22 апр.
- 146 просмотров
3

ответа
PHP

+1 ещё

Простой
Как отправить сообщение в определенную тему в группе Telegram боту на PHP?
- 1 подписчик
- 22 апр.
- 96 просмотров
1

ответ
PHP

+1 ещё

Простой
Почему не работает JWT поверка?
- 1 подписчик
- 22 апр.
- 73 просмотра
0

ответов
Показать ещё Загружается…

PHP Developer

YCLIENTS • Москва

от 200 000 до 350 000 ₽

PHP разработчик

Ведисофт • Екатеринбург

от 25 000 ₽

Midlle PHP developer (backend)

ИТЦ Аусферр • Магнитогорск

от 100 000 до 160 000 ₽

Разработка одностраничника

25 апр. 2024, в 11:02

5000 руб./за проект

Фронт мобильное приложение

25 апр. 2024, в 10:42

150000 руб./за проект

Настроить вёрстку webapp-telegram

25 апр. 2024, в 10:41

2000 руб./за проект

Дмитрий Кузнецов, ошибок никаких, он просто очень долго что-то пытается загрузить, а потом выдает просто пустую страницу.
Да, CloudFlare вообще легко может рубить такие запросы. У меня даже не проходит curl на тот же домен, с какого он был инициирован.

Answer 1 · 2019-08-29 21:21:26

Какой курл-то? Пытаетесь curlить сайт который подключили к CF или с этого сайта куда-то еще curl запросы шлёте?

Если второй вариант, то CF здесь не причем, он же на вход трафик принимает и фильтрует, и к вашему серверу никак не относится и выходу в интернет с него.

Может ли не работать cURL из-за CloudFlare?

Войдите, чтобы написать ответ

Минуточку внимания

Войдите на сайт