Например, при работе с данными о транзакциях в интернет-магазине можно собрать весь массив данных за неделю, а затем проанализировать его на наличие тенденций и аномалий. Используйте следующие команды для выполнения базового анализа в Hadoop:
hadoop jar /path/to/hadoop-streaming.jar -input /user/input_data -output /user/output_data
2. Потоковая обработка
Потоковая обработка данных идеально подходит для анализа в реальном времени. Инструменты, такие как Apache Kafka и Apache Flink, позволяют обрабатывать данные по мере их поступления. Например, если у вас есть система мониторинга, которая отслеживает поведение пользователей на сайте, использование потоковой обработки позволит вам мгновенно реагировать на изменения в активности пользователей.
Конец ознакомительного фрагмента.
Текст предоставлен ООО «Литрес».
Прочитайте эту книгу целиком, купив полную легальную версию на Литрес.
Безопасно оплатить книгу можно банковской картой Visa, MasterCard, Maestro, со счета мобильного телефона, с платежного терминала, в салоне МТС или Связной, через PayPal, WebMoney, Яндекс.Деньги, QIWI Кошелек, бонусными картами или другим удобным Вам способом.