))
Kafka: A Distributed Messaging System for Log Processing
Manage episode 487366633 series 3670304
Вміст надано The Binary Breakdown. Весь вміст подкастів, включаючи епізоди, графіку та описи подкастів, завантажується та надається безпосередньо компанією The Binary Breakdown або його партнером по платформі подкастів. Якщо ви вважаєте, що хтось використовує ваш захищений авторським правом твір без вашого дозволу, ви можете виконати процедуру, описану тут https://uk.player.fm/legal.
This paper introduces Kafka, a novel distributed messaging system designed for high-throughput log processing. Kafka addresses limitations in existing messaging systems and log aggregators by offering a scalable, efficient architecture with a simple API. Key features include a pull-based consumption model, efficient storage and data transfer mechanisms, and the use of ZooKeeper for distributed coordination. Performance tests demonstrate Kafka's superior throughput compared to ActiveMQ and RabbitMQ, highlighting its suitability for handling massive volumes of log data. The authors detail Kafka's implementation at LinkedIn, illustrating its use in both online and offline applications.
https://notes.stephenholiday.com/Kafka.pdf
44 епізодів
Поширити
