Объяснение конфигураций производителя, которые улучшают производительность конвейеров Kafka. В Gojek мы используем Kafka для решения масштабных задач . Поэтому для нас важна каждая мелочь. Производители в Kafka имеют множество конфигураций, и знание того, когда их использовать, может улучшить производительность вашего конвейера Kafka. В этом посте давайте проанализируем некоторые из этих конфигураций, которые вы, возможно, не используете, но должны. Конфигурации производителя..

В McAfee мы широко используем Apache Kafka. Мы создали OpenDXL SDK , обертывающий обычный Java-клиент Apache Kafka, чтобы добавить пользовательскую схему закодированных сообщений. OpenDXL SDK предоставляет Consumer, Producers и остальные клиентские функции Kafka. Потребительские приложения Потребитель — это объект, который позволяет считывать данные из кластера Kafka с использованием модели извлечения. Как правило, пользователи OpenDXL SDK реализуют потребительские приложения,..

Узнайте о популярной системе сообщений Эта статья о популярной системе обмена сообщениями, известной как Kafka. Если вы не знаете, что такое Кафка, вы попали в нужное место. Вам не нужно беспокоиться, если вы знакомы с одним языком программирования, но не знаком с другим, поскольку он не зависит от языка. Мы расскажем об основах, о том, как это работает, и о терминологии компонентов системы. Что такое Кафка? Kafka - это система распределенного обмена сообщениями. Он следует..

По умолчанию Apache Kafka использует Zookeeper для хранения метаданных. Zookeeper — хорошее зрелое программное обеспечение. Несмотря на это, это доставляет некоторые неудобства. Если вы постоянно используете Kafka, вы, вероятно, были бы рады удалить зависимость от Zookeeper. Я лично много лет использую Kafka как для критичных к задержке, так и для простых сообщений в течение нескольких лет, и я хотел бы избавиться от Zookeeper. У Kafka есть экспериментальный режим, который позволяет..