-
kafka 数据结构
【技海登峰】Kafka漫谈系列（三）详解Kafka的数据结构与存储机制 Kafka 使用消息日志（Log）机制来持久化保存数据，我们知道Kafka实际是以Partition分区为单位进行负载均衡和资源分配，每个Partition又由多个Replica副本组成，副本之间分布于不同的Broker上来保证高可用，因此每个副本都将数据保存于本地消息日志（Log）下。在搭建Kafka服务时，我们在serve…- 4
- 0
-
【项目实战】EFK，是一套广泛用于日志收集、存储、分析和可视化的开源解决方案，尤其在Kubernetes生态中备受推崇。
一，EFK是什么？ EFK，Elasticsearch + Fluentd/Filebeat + Kibana EFK，是一套广泛用于日志收集、存储、分析和可视化的开源解决方案，尤其在Kubernetes生态中备受推崇。 EFK，是一套高度灵活的日志管理方案，用户可根据实际需求选择Fluentd或Filebeat作为收集器，并结合Kubernetes特性实现自动化部署。 EFK，核心价值在于将分散…- 8
- 0
-
大数据-70 Kafka 高级特性 物理存储 日志存储 日志清理: 日志删除与日志压缩
点一下关注吧！！！非常感谢！！持续更新！！！ 目前已经更新到了： Hadoop（已更完）HDFS（已更完）MapReduce（已更完）Hive（已更完）Flume（已更完）Sqoop（已更完）Zookeeper（已更完）HBase（已更完）Redis （已更完）Kafka（正在更新…） 章节内容 上节我们完成了如下内容： 日志索引文件查看物理存储、查看详细的索引文件消息偏移偏移量的存储 日志清理 …- 2
- 0