Вопросы по теме 'spark-streaming'
почему моя работа с потоковой передачей искры становится медленнее
У меня есть задание, которое получает данные от Kafka каждые 10 секунд, а затем я форматирую данные и вставляю их в cassandra, но это очень сбивает с толку, что моя работа становится все медленнее и медленнее.
Согласно моей статистике, каждые 10...
1519 просмотров
schedule
22.04.2024
отправьте этот фрейм данных потоковой передачи искры в hbase, используя scala
Я получаю kafka в потоке искры и обрабатываю свои данные для создания фрейма данных, который выглядит следующим образом:...
636 просмотров
schedule
26.05.2024
Потоковая передача Spark + Accumulo — сериализация BatchWriterImpl
Я ищу коннекторы Spark Streaming + Accumulo и пример полного использования.
В настоящее время я пытаюсь записать результаты потоковой передачи Spark в таблицу Accumulo, но получаю NotSerializableException для BatchWriter. Может ли кто-нибудь...
302 просмотров
schedule
19.03.2024
Поддерживаемые протоколы члена группы несовместимы с протоколами существующих участников.
У меня проблема, связанная с Кафкой.
У меня есть текущая служба ( Producer ), которая отправляет сообщение в тему Kafka ( events ). Сервис использует kafka_2.12 v1.0.0 , написанный на Java.
Я пытаюсь интегрировать его с примером проекта...
4835 просмотров
schedule
01.05.2024