@vante_scribaxxi

Как организовать парсинг и автозаливку на вордпрес?

Есть сайт (WordPress), на нем нужно ежедневно обновлять данные.
Данные берутся с другого сайта, т.е. программа должна их (данные) спарсить, отформатировать и грузить на сайт-реципиент.
Ранее писал только простые краулеры и selenium ботов. Т.е. в деталях я примерно понимаю как что должно происходить.
Как я это вижу: пишу управляющий модуль, запускаемый раз в 24 часа в 4:00. Он импортирует модули scrapy-пауков, запускает их в пуле потоков, а потом генерирует файлик и селениумом, через админку загружает в WordPress.
Вопросы.
1. Насколько это решение хорошо? Есть ли какие-то подводные камни? Посоветуете что?
2. Как эту задачу можно решить по другому?
  • Вопрос задан
  • 242 просмотра
Пригласить эксперта
Ответы на вопрос 1
@Verz1Lka
Web scraping expert
Либо писать сразу в парсере импорт в базу (но придётся разбираться со структурой), либо можно писать, например в файл, и использовать какой нибудь плагин импорта в WP, которых масса.
Ответ написан
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы