
Apache Kafka
БесплатныйРаспределённая платформа потоковой обработки данных для построения высоконагруженных систем обмена сообщениями в реальном времени
В каталоге 3 сервиса по направлению «Потоковая обработка данных (Streaming)». Стоимость — от 3 500 ₽ до $4 500/мес. 2 сервиса с бесплатным тарифом.

Распределённая платформа потоковой обработки данных для построения высоконагруженных систем обмена сообщениями в реальном времени

Open source брокер сообщений, реализующий протокол AMQP и являющийся стандартом де-факто для обмена сообщениями между микросервисами.

Managed сервис потоковой обработки данных в Yandex Cloud с API, совместимым с Amazon Kinesis Data Streams, для построения real-time пайплайнов.
| Название | Мин. цена | Пробный период | Развёртывание | Интеграции | Рейтинг |
|---|---|---|---|---|---|
| Apache Kafka | Бесплатно | Бесплатный тариф | On-premises / Облако / Docker | 200+ | Нет оценок |
| RabbitMQ | Бесплатно | Бесплатный тариф | On-premise | 50+ | Нет оценок |
| Yandex Data Streams | от 3 500 ₽/мес | — | Облако | 15+ | Нет оценок |
Kafka — для высоконагруженных потоковых данных (миллионы сообщений в секунду), хранение логов, event sourcing, stream processing. RabbitMQ — для традиционной очереди сообщений и RPC между микросервисами, проще в настройке. Для big data и real-time аналитики — Kafka. Для межсервисной коммуникации в микросервисной архитектуре — RabbitMQ.
Для задач, где данные нужно обрабатывать сразу при поступлении, а не пачками. IoT (миллионы датчиков), финансовые транзакции (антифрод в реальном времени), логи (мониторинг и алерты), события пользователей (клики, покупки), real-time аналитика дашбордов. Без streaming такие задачи решаются с задержкой в часы или сутки, что неприемлемо.
Фреймворк коннекторов Kafka для интеграции с внешними системами. Source connectors загружают данные из баз, SaaS, файлов в Kafka topics. Sink connectors выгружают из Kafka в DWH, Elasticsearch, S3. Используется для ETL через Kafka как центральную шину данных. Сотни готовых коннекторов в экосистеме Confluent.
Сервис Яндекс.Облако для потоковой обработки данных, аналог AWS Kinesis. Полностью управляемый, не требует администрирования, оплата по факту использования. Совместим с Kafka API. Используется российскими компаниями для real-time данных, если они уже в экосистеме Яндекс.Облако.
Kafka Streams — библиотека Java, встраивается в ваше приложение, работает внутри Kafka кластера, проще. Flink — отдельный cluster-based фреймворк, мощнее, поддерживает более сложные сценарии (complex event processing, stateful streams), лучше для больших объёмов. Для простых задач — Kafka Streams, для enterprise real-time аналитики — Flink.
Apache Kafka, RabbitMQ, Apache Pulsar, Yandex Data Streams, AWS Kinesis, Apache Flink, Kafka Streams — платформы потоковой обработки данных в реальном времени. Используются для IoT, финансовых транзакций, real-time аналитики, антифрода, мониторинга. Kafka — де-факто стандарт event-driven архитектур. RabbitMQ — для межсервисной коммуникации.
Каталог обновлён: март 2026