Заполните форму — и мы свяжемся с вами

Упростите работу над интеграциями с Apache Kafka

Брокер сообщений Apache Kafka — распределённая потоковая платформа, способная обрабатывать миллионы событий ежедневно. Kafka гарантирует простоту интеграции в инфраструктуру проекта, надёжность и масштабируемость системы.
rus: Централизуйте обмен данными при помощи Apache Kafka
Заполните форму — и мы свяжемся с вами

Kafka Connect

Kafka Connect — фреймворк Apache Kafka, обеспечивающий масштабируемость и гибкость перемещения данных между Kafka и другими хранилищами. Этот фреймворк позволяет брокеру выступать в роли сервисной шины ESB.
rus: Kafka Connect

Архитектура проекта с Kafka

rus: Архитектура проекта с Apache Kafka

Возможности Apache Kafka

rus: Apache Kafka Потоковая обработка данных

Потоковая обработка данных

Потоковая обработка Kafka работает с данными в режиме реального времени со скоростью генерации сообщений. Обработка сообщений происходит непрерывно и без блокировки. Многие бизнес-процессы также осуществляются непрерывно и не требуют ответа для обработки. Потоковая обработка данных необходима для таких бизнес-процессов, как оповещение о подозрительных транзакциях или отслеживание почтовой доставки.

Отслеживание активности приложений

Любые сообщения, возникающие в приложении, могут быть опубликованы в специальной теме (topic) Kafka. Например, каждый документ ERP-системы или каждое действие пользователей на сайте: клики, добавление в избранное, добавление/удаление из «Корзины», заполнение форм, просмотр страниц (и его глубина) — можно отправлять и распределять по специально заданным темам Kafka. Так, другие темы (потребители) могут подписаться на необходимые темы для различных целей — мониторинг, анализ, составление отчётов, персонализация и т. д.
rus: Apache Kafka Отслеживание активности приложений
rus: Apache Kafka Ведение журнала и мониторинг логов

Ведение журнала и мониторинг логов

Kafka позволяет вести журналы и мониторить логи. Логи можно публиковать в темах Kafka, а журналы — хранить и обрабатывать в кластере в течение необходимого количества времени. Если у вас есть специальное приложение для мониторинга, оно сможет получать данные из тем Kafka в режиме реального времени.

Хранение сообщений

Kafka добавляет в журнал (сохраняет на диске) каждое сообщение и хранит там вплоть до момента очистки журнала от старых сообщений, который пользователь назначает заранее. Благодаря этому Kafka может использоваться как достоверный источник данных (в отличие от RabbitMQ, который удаляет сообщения сразу после доставки).
rus: Apache Kafka Хранение сообщений

Преимущества Kafka Apache

Одним из преимуществ Kafka является его надёжность. Например, если по какой-то причине «упадёт» один из брокеров Kafka, он переключит весь поток данных на другие брокеры и автоматически распределит между ними нагрузку — и система продолжит свою работу в штатном режиме.
Apache Kafka позволяет обрабатывать данные любого объёма. Вы можете начать работать с одним брокером, чтобы попробовать возможности Kafka, а потом увеличить количество брокеров для полной эксплуатации системы. Увеличить объём можно и во время работы текущего количества брокеров — это никак не отразится на системе в целом.
Благодаря своей высокой пропускной способности Apache Kafka способен обрабатывать более миллиона событий в секунду. Это делает Kafka самым популярным брокером сообщений в работе с big data.

Масштабируемость

Производительность

Надёжность системы

rus: Kafka Connect Масштабируемость | kt.team
rus: Kafka Connect Надёжность системы | kt.team
rus: Kafka Connect Производительность | kt.team

НАШИ КЕЙСЫ

Интеграция Kafka в enterprise-инфраструктуру проекта

Клиент
Крупный производитель и ретейлер мягкой и корпусной мебели, матрасов и товаров для сна.
Задача
Заказчик хотел, чтобы механизм транспортировки данных был легковесным, без сложной логики, и выполнял исключительно функцию передачи сообщений из одной системы в другую. При этом нужно было учитывать потребность компании в слабой взаимосвязанности систем, чтобы при необходимости убрать одну из них или заменить на другую.

Интеграция Pimcore для автоматизации бизнес-процессов и управления данными

Альтернативные варианты — Talend, Mule, WSO2

ДЕЛИМСЯ ОПЫТОМ И ЗНАНИЯМИ

Информация будет полезна для IT-директоров, руководителей и менеджеров IT-продуктов.

ЦЕНООБРАЗОВАНИЕ

Проекты оцениваются
индивидуально, потому что для наших клиентов типовых задач не бывает.
rus: kt.team Ценообразование

ВАШ ПЕРСОНАЛЬНЫЙ МЕНЕДЖЕР

rus: Сергей Влазнев Персональный менеджер
Сергей Влазнев
Менеджер по продажам
Сергей проведет первичную консультацию, запланирует встречу с нашей командой, оценит ваш проект и оформит все протоколы встреч.
Email:
Telegram:
WhatsApp:
Телефон:
Получить консультацию