Apache Kafka. Потоковая обработка и анализ данных
Қосымшада ыңғайлырақҚосымшаны жүктеуге арналған QRRuStore · Samsung Galaxy Store
Huawei AppGallery · Xiaomi GetApps

автордың кітабынан сөз тіркестері  Apache Kafka. Потоковая обработка и анализ данных

Денис
Денисдәйексөз келтірді2 жыл бұрын
Брокеры Kafka ожидают, что в качестве ключей и значений сообщений задействуются байтовые массивы.
1 Ұнайды
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді16 сағат бұрын
Kafka может без каких-либо проблем работать с несколькими производителями вне зависимости от того, используют они один топик или несколько
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді16 сағат бұрын
По мере роста развертываемых систем Kafka может оказаться удобным наличие нескольких кластеров. Вот несколько причин этого. • Разделение типов данных. • Изоляция по требованиям безопасности. • Несколько центров обработки данных (ЦОД) (восстановление в случае катаклизмов).
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді17 сағат бұрын
В настройки брокеров Kafka включается длительность хранения топиков по умолчанию — или в течение определенного промежутка времени (например, семь дней), или до достижения разделом определенного размера в байтах (например, 1 Гбайт). Превысившие эти пределы сообщения становятся недействительными и удаляются.
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді17 сағат бұрын
Ключевая возможность Apache Kafka — сохранение информации (retention) в течение длительного времени.
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді17 сағат бұрын
Все производители должны соединяться с ведущим для публикации сообщений, но потребители могут получать сообщения либо от ведущего, либо от одного из последователей.
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді17 сағат бұрын
Каждый раздел принадлежит одному из брокеров кластера, который называется ведущим (leader)
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді17 сағат бұрын
Брокеры Kafka предназначены для работы в составе кластера (cluster). Один из брокеров кластера функционирует в качестве контроллера (cluster controller).
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді17 сағат бұрын
Отдельный сервер Kafka называется брокером (broker).
Комментарий жазу
Artyom Hackimullin
Artyom Hackimullinдәйексөз келтірді17 сағат бұрын
Потребители работают в составе групп потребителей (consumer groups) — одного или нескольких потребителей, объединившихся для обработки топика. Организация в группы гарантирует чтение каждого раздела только одним членом группы.
Комментарий жазу