Как решить проблему кодировки при использовании phpQuery?

Question

Кирилл @SH8DER

Начинающий Web-разработчик

Как решить проблему кодировки при использовании phpQuery?

Получаю через file_get_contents страницу, страница точно в utf8, мета тэг с кодировкой тоже в порядке. Но за место русского текста имею вот это:

XVR Ð²Ð¸Ð´ÐµÐ¾ÑÐµÐ³Ð¸ÑÑÑÐ°ÑÐ¾Ñ, Ð¿ÐµÐ½ÑÐ°-Ð±ÑÐ¸Ð´. ÐÐ¾Ð»Ð¸ÑÐµÑÑÐ²Ð¾ Ð²Ð¸Ð´ÐµÐ¾Ð²ÑÐ¾Ð´Ð¾Ð²: 32 ÐºÐ°Ð½Ð°Ð»Ð°; ÐÐ¾Ð´Ð´ÐµÑÐ¶Ð¸Ð²Ð°ÐµÐ¼ÑÐµ Ð²Ð¸Ð´ÐµÐ¾ÑÐ¸Ð³Ð½Ð°Ð»Ñ: ÐÐ½Ð°Ð»Ð¾Ð³, HDCVI, TVI, AHD, IP (32 ÐºÐ°Ð¼ÐµÑÑ, Ð´Ð¾ 5ÐÐ¿); Ð Ð°Ð·ÑÐµÑÐµÐ½Ð¸Ðµ Ð·Ð°Ð¿Ð¸ÑÐ¸ 1080p / 720p / 960H / D1 / HD1 / 2CIF / CIF; Ð¡ÐºÐ¾ÑÐ¾ÑÑÑ Ð·Ð°Ð¿Ð¸ÑÐ¸: 15 ÐºÐ°Ð´ÑÐ¾Ð²/Ñ - 1080p, 25 ÐºÐ°Ð´ÑÐ¾Ð²/Ñ - 1080N/720p; ÐÐ¸Ð´ÐµÐ¾ÑÐ¶Ð°ÑÐ¸Ðµ/Ð°ÑÐ´Ð¸Ð¾ÑÐ¶Ð°ÑÐ¸Ðµ: H.264/H.264+; ÐÑÐ´Ð¸Ð¾Ð²ÑÐ¾Ð´Ñ/Ð²ÑÑÐ¾Ð´Ñ: 1/1 , RCA; ÐÐ¸Ð´ÐµÐ¾Ð²ÑÑÐ¾Ð´Ñ:  1-HDMI, 1-VGA;  Ð Ð¾Ð-Ð¿Ð¾ÑÑÑ: Ð½ÐµÑ;  ÐÐ¾Ð´Ð´ÐµÑÐ¶Ð¸Ð²Ð°ÐµÐ¼Ð¾Ðµ ÐºÐ¾Ð»Ð¸ÑÐµÑÑÐ²Ð¾ Ð¶ÐµÑÑÐºÐ¸Ñ Ð´Ð¸ÑÐºÐ¾Ð²:  2 HDD Ð´Ð¾ 8Tb(ÐºÐ°Ð¶Ð´ÑÐ¹);  ÐÐ½ÑÐµÑÑÐµÐ¹ÑÑ: 1-USB2.0, 1-USB3.0, RS-485; ÐÐ¸ÑÐ°Ð½Ð¸Ðµ: DC12V; ÐÐ¾ÑÑÐµÐ±Ð»ÑÐµÐ¼ÑÐ¹ ÑÐ¾Ðº: 4Ð; Ð¡ÐµÑÐµÐ²ÑÐµ ÑÑÐ½ÐºÑÐ¸Ð¸: HTTP, IPv4/IPv6,

Кодировку принудительно тоже задавал

phpQuery::newDocumentHTML(getHtml($page), $charset="utf-8");

результат тот же.

Если сохранять файл и открыть текстовым редактором, то там всё в порядке внутри с русскими символами, но если начать этот файл парсить то будет та же проблема.

Если зайти в sublime text и пересохранить в utf-8 with BOM то файл парсится с нормальным русскими символами, в notepad++ не срабатывает это.

Добавлял в начало контента и файла "\xEF\xBB\xBF" - опять же ничего не дало.

Уже не знаю что делать, как решить данную проблему?

Вопрос задан более трёх лет назад
268 просмотров

2 комментария

Подписаться 1 Простой 2 комментария

Александр @AleksandrB

Ну если при перекодировке сублаймом все ок, то проблема в кодировке, задаваемой при создании файла, посмотрите какие еще типы кодировок у phpquery присутствуют и посмотрите после создания в какой кодировке он сохраняется, может там вовсе не utf-8.

Написано более трёх лет назад

Кирилл @SH8DER Автор вопроса

Владимир @, Вот пару функций:

function getHtml($url) {

    if ( file_exists( __DIR__ . '/cache/' . md5( $url) . '.html' ) ) {
        return file_get_contents(__DIR__ . '/cache/' . md5( $url) . '.html' );
    } else {
        $content = file_get_contents($url);
        file_put_contents( __DIR__ . '/cache/' . md5( $url ) . '.html', "\xEF\xBB\xBF" . $content );
        echo 'Страница закэшированна в файл - ' . md5( $url ) . '.html' . PHP_EOL;
        return "\xEF\xBB\xBF" . $content;
    }

}

foreach ($pages_link as $page) {
    $pq = phpQuery::newDocumentHTML(getHtml($page), $charset="utf-8");
//    do_someshit();
    phpQuery::unloadDocuments();
    gc_collect_cycles();
    unset($pq);
}

Написано более трёх лет назад

Пригласить эксперта

Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации

Похожие вопросы

Python

+2 ещё

Средний
Как пофиксить ошибку с сертификатом при работе с selenium?
- 1 подписчик
- 3 часа назад
- 12 просмотров
0

ответов
WordPress

+1 ещё

Средний
Парсинг сайта на wordpress?
- 1 подписчик
- 9 часов назад
- 56 просмотров
2

ответа
Парсинг

+1 ещё

Средний
Как правильно написать функцию IMPORTJSON для парсинга цен криптовалют в гугл таблицу?
- 1 подписчик
- 13 часов назад
- 12 просмотров
0

ответов
PHP

+1 ещё

Простой
Почему клиент телеграма отсылает битый запрос?
- 1 подписчик
- вчера
- 100 просмотров
0

ответов
PHP

+2 ещё

Простой
Как в Drupal 10 массово проставить noindex для >1000 страниц?
- 1 подписчик
- вчера
- 42 просмотра
1

ответ
PHP

+1 ещё

Простой
Парсинг XML yandex?
- 1 подписчик
- вчера
- 94 просмотра
0

ответов
PHP

Простой
Заполнить не существующими датами из бд в графике apexcharts?
- 1 подписчик
- вчера
- 57 просмотров
2

ответа
PHP

+1 ещё

Средний
Почему одинаково-написанный curl запрос отдает разные ответы?
- 1 подписчик
- 17 апр.
- 135 просмотров
0

ответов
PHP

Простой
Вывожу куки в корзине, куда записал товар, не выводит, в чем ошибка?
- 1 подписчик
- 17 апр.
- 84 просмотра
0

ответов
PHP

Простой
Функция str_replace() не работает?
- 1 подписчик
- 17 апр.
- 187 просмотров
3

ответа
Показать ещё Загружается…

PHP разработчик

Ведисофт • Екатеринбург

от 25 000 ₽

PHP-разработчик

M-Social Production • Брянск

от 70 000 ₽

PHP Developer

YCLIENTS • Москва

от 200 000 до 350 000 ₽

Разработать формирование УПД на Java

20 апр. 2024, в 00:28

20000 руб./за проект

Написать программу иммитирующую поведение человека для выбора услуг

20 апр. 2024, в 00:08

10000 руб./за проект

Разработать мобильное приложение android "справочник студента"

20 апр. 2024, в 00:01

4000 руб./за проект

Ну если при перекодировке сублаймом все ок, то проблема в кодировке, задаваемой при создании файла, посмотрите какие еще типы кодировок у phpquery присутствуют и посмотрите после создания в какой кодировке он сохраняется, может там вовсе не utf-8.
Владимир @, Вот пару функций:
function getHtml($url) { if ( file_exists( __DIR__ . '/cache/' . md5( $url) . '.html' ) ) { return file_get_contents(__DIR__ . '/cache/' . md5( $url) . '.html' ); } else { $content = file_get_contents($url); file_put_contents( __DIR__ . '/cache/' . md5( $url ) . '.html', "\xEF\xBB\xBF" . $content ); echo 'Страница закэшированна в файл - ' . md5( $url ) . '.html' . PHP_EOL; return "\xEF\xBB\xBF" . $content; } } foreach ($pages_link as $page) { $pq = phpQuery::newDocumentHTML(getHtml($page), $charset="utf-8"); // do_someshit(); phpQuery::unloadDocuments(); gc_collect_cycles(); unset($pq); }

Как решить проблему кодировки при использовании phpQuery?

Войдите, чтобы написать ответ

Минуточку внимания

Войдите на сайт