-
kafka 数据结构
【技海登峰】Kafka漫谈系列(三)详解Kafka的数据结构与存储机制 Kafka 使用消息日志(Log)机制来持久化保存数据,我们知道Kafka实际是以Partition分区为单位进行负载均衡和资源分配,每个Partition又由多个Replica副本组成,副本之间分布于不同的Broker上来保证高可用,因此每个副本都将数据保存于本地消息日志(Log)下。在搭建Kafka服务时,我们在serve…- 2
- 0
考高分2025-03-03 10:15:42 -
【项目实战】EFK,是一套广泛用于日志收集、存储、分析和可视化的开源解决方案,尤其在Kubernetes生态中备受推崇。
一,EFK是什么? EFK,Elasticsearch + Fluentd/Filebeat + Kibana EFK,是一套广泛用于日志收集、存储、分析和可视化的开源解决方案,尤其在Kubernetes生态中备受推崇。 EFK,是一套高度灵活的日志管理方案,用户可根据实际需求选择Fluentd或Filebeat作为收集器,并结合Kubernetes特性实现自动化部署。 EFK,核心价值在于将分散…- 3
- 0
考高分2025-02-25 15:20:04 -
大数据-70 Kafka 高级特性 物理存储 日志存储 日志清理: 日志删除与日志压缩
点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完)HDFS(已更完)MapReduce(已更完)Hive(已更完)Flume(已更完)Sqoop(已更完)Zookeeper(已更完)HBase(已更完)Redis (已更完)Kafka(正在更新…) 章节内容 上节我们完成了如下内容: 日志索引文件查看物理存储、查看详细的索引文件消息偏移偏移量的存储 日志清理 …- 2
- 0
考高分2025-02-25 15:19:59