Задать вопрос
rudenkovk
@rudenkovk
DevOps, sysadmin
мониторинг

Визуализация данных из hadoop?

Всем привет. Начинаю изучать hadoop и рядом с ним. Возник вопрос — как визуализировать данные?


Например: у меня есть пара терабайт разных логов в HDFS, я хочу нарисовать график (a la munin), скажем по частоте 404 в логе апача, как сделать? Прошу наводки для грамотного артобстрела! :)
  • Вопрос задан
  • 3940 просмотров
Комментировать
Подписаться 9 Оценить Комментировать
Пригласить эксперта
Ответы на вопрос 4
7workers
@7workers
гуглите «adhoc analytics»
Ответ написан
Комментировать
Комментировать
z0rc
@z0rc
Можно посмотреть в сторону подключения elasticsearch и kibana.
Ответ написан
1 комментарий
1 комментарий
@ezavialov

Самое эффективное решение для описанной задачи написать джобу (или заюзать готовый org.apache.hadoop.examples.Grep) + bash + gnuplot.

Ответ написан
1 комментарий
1 комментарий
@Yuurga
Есть решения вроде IBM DataSheets платное, а также TABLEAU тоже платное, но последнее дает месяц бесплатной лицензии.
Ответ написан
Комментировать
Комментировать
Ваш ответ на вопрос

Войдите, чтобы написать ответ

Войти через центр авторизации
Похожие вопросы
Вакансии с Хабр Карьеры
Product Manager сервиса организации ремонта UGOL
UGOL • Санкт-Петербург
от 200 000 до 250 000 ₽
Инженер по автоматизации процессов разработки
Данные – Центр обработки и автоматизации • Москва
от 200 000 ₽
Account Manager Amazon (Senior)
Gora Group LLC
от 1 200 $
Ещё вакансии
Заказы с Хабр Фриланса
Разработать несистемный алерт
19 апр. 2024, в 20:11
500 руб./за проект
Расработка Парсер для сайта https://soliq.uz/activities/debtor
19 апр. 2024, в 19:51
3000 руб./за проект
Два скрипта, Python, web3.py, вызов функции смарт-конракта
19 апр. 2024, в 19:47
50000 руб./за проект
Ещё заказы