靚麗時尚館

位置:首頁 > 健康生活 > 心理

kafka稀疏索引原理

心理2.36W
kafka稀疏索引原理

Kafka中的索引文件以稀疏索引的方式構造消息的索引,它並不保證每個消息在索引文件中都有對應的索引項。每當寫入一定量 (broker參數 s指定),默認為 4096 ,即 4KB 的消息時,偏移量索引文件和時間戳索引文件分別增加一個偏移量索引項和時間戳索引項。

我們知道,單個Kafka的TopicPartition中,消息數據會被切分成段(segment)來存儲,擴展名為。log文件的切分時機由大小參數s(默認值1G)和時間參數s(默認值7天)共同決定。

標籤:索引 kafka