Потоковый конвейер на Apache Kafka с библиотекой Quix Streams
Быстрая и простая обработка потоков сообщений в одном приложении с Quix Streams вместо Kafka Streams: практический пример на Python с обогащением и фильтрацией данных. Сегодня я познакомилась с Quix Streams — очередной замечательной библиотекой для создания потоковых конвейеров обработки данных на Python. Она работает подобно Kafka Streams, но использует Python вместо Java. Quix Streams позволяет строить потоковые конвейеры обработки данных в реальном времени, используя знакомые каждому дата-инженеру датафреймы с гарантиями масштабируемости, отказоустойчивости и долговечности Kafka...
11 месяцев назад
Что такое Apache Kafka и где оно используется
В последние годы распределенные системы и обработка данных в реальном времени стали неотъемлемой частью многих бизнес-процессов. Одним из самых популярных инструментов для работы с потоками данных является Apache Kafka. В этом посте мы разберем, что такое Kafka, как она работает и где может быть использована. Apache Kafka — это распределенная платформа для обработки потоков данных в реальном времени. Она была разработана в LinkedIn и в 2011 году была передана в Apache Software Foundation. Kafka позволяет...