Apache Kafka Tutorial

В больших данных используется огромный объем данных. Что касается данных, у нас есть две основные проблемы: первая задача - как собрать большой объем данных, а вторая - проанализировать собранные данные. Чтобы преодолеть эти проблемы, вам понадобится система обмена сообщениями.

Kafka разработан для распределенных систем с высокой пропускной способностью. Kafka, как правило, очень хорошо работает как замена более традиционному брокеру сообщений.

По сравнению с другими системами обмена сообщениями, Kafka имеет лучшую пропускную способность, встроенное разделение, репликацию и присущую отказоустойчивость, что делает его подходящим для крупномасштабных приложений обработки сообщений.

Apache Kafka - это распределенная система обмена сообщениями "публикация-подписка" и надежная очередь, которая может обрабатывать большой объем данных и позволяет передавать сообщения от одной конечной точки к другой.

Kafka подходит как для автономного, так и для онлайн-потребления сообщений.

Список тем, затронутых в этом руководстве:

Apache Kafka - Введение
Apache Kafka - Основы
Apache Kafka - кластерная архитектура
Apache Kafka - WorkFlow
Apache Kafka - шаги по установке
Apache Kafka - Основные операции
Apache Kafka - пример простого производителя
Apache Kafka - пример группы потребителей
Apache Kafka - Интеграция со Storm
Apache Kafka - интеграция со Spark
Приложение реального времени (Twitter)
Apache Kafka - Инструменты
Apache Kafka - Приложения