聊聊 Apache Kafka
以下是跟 AI 聊聊 Kafka 的一些筆記 什麼是 Kafka? Kafka 是一種分佈式消息系統,具有高吞吐量、低延遲、可持久性和分區的特點。它主要用於分佈式系統中的數據發布/訂閱,並且可以作為消息隊列、數據流式處理等用途。 Kafka的設計基於分佈式系統的概念,它包含了一組服務器,這些服務器被稱為 brokers …
以下是跟 AI 聊聊 Kafka 的一些筆記 什麼是 Kafka? Kafka 是一種分佈式消息系統,具有高吞吐量、低延遲、可持久性和分區的特點。它主要用於分佈式系統中的數據發布/訂閱,並且可以作為消息隊列、數據流式處理等用途。 Kafka的設計基於分佈式系統的概念,它包含了一組服務器,這些服務器被稱為 brokers …
一、整體結構 在具體分析數據倉庫之前先看下一下數據中心的整體架構以及數據流向: DB 是現有的數據來源(也稱各個系統的元數據),可以為MySql、SQLserver、文件日誌等,為數據倉庫提供數據來源的一般存在於現有的業務系統之中。 ETL的是 Extract-Transform-Load 的縮寫,用來描述將數據從來源 …