Apache Kafka. Потоковая обработка и анализ данных
Қосымшада ыңғайлырақҚосымшаны жүктеуге арналған QRRuStore · Samsung Galaxy Store
Huawei AppGallery · Xiaomi GetApps

автордың кітабынан сөз тіркестері  Apache Kafka. Потоковая обработка и анализ данных

Денис
Денисдәйексөз келтірді2 жыл бұрын
Брокеры Kafka ожидают, что в качестве ключей и значений сообщений задействуются байтовые массивы.
1 Ұнайды
Комментарий жазу
Ирина
Иринадәйексөз келтірді1 күн бұрын
Для простоты рекомендуется выбирать либо хранение по размеру, либо хранение по времени, а не оба варианта
Комментарий жазу
Некоторые из этих параметров, включая число разделов и параметры сохранения сообщений, можно задавать для каждого топика отдельно с помощью инструментов администратора (рассматриваются в главе 12).
Комментарий жазу
Для того чтобы кластер Kafka не стал несбалансированным из-за того, что ведущие реплики всех разделов сосредоточены на одном брокере, можно указать эту конфигурацию, чтобы обеспечить максимальную сбалансированность ведущих реплик.
Комментарий жазу
В соответствии с конфигурацией Kafka по умолчанию брокер должен автоматически создавать топик, когда
Комментарий жазу
, что брокер поместит новый раздел в каталог, в котором в настоящий момент хранится меньше всего разделов, а не используется меньше всего дискового пространства, поэтому равномерное распределение данных по разделам не гарантируется
Комментарий жазу
Kafka сохраняет все сообщения на жесткий диск, и
Комментарий жазу
Новая конфигурация слушателей listeners представляет собой разделенный запятыми список URI, которые мы прослушиваем, с именами слушателей.
Комментарий жазу
У каждого брокера Kafka должен быть целочисленный идентификатор, задаваемый параметром broker.id.
Комментарий жазу
Чтобы настроить работу серверов ZooKeeper в ансамбле, у них должна быть единая конфигурация со списком всех серверов, а у каждого сервера в каталоге данных должен иметься файл myid с идентификатором этого сервера
Комментарий жазу