位置:长沙达内IT教育培训学校 > 学校动态 > 大数据Kafka 分片和副本机制
大数据开发--大数据Kafka:Kafka的分片和副本机制,通过具体的内容向大家展现,希望对大家大数据Kafka的学习有所帮助。
Kafka的分片和副本机制
一、分片机制
主要解决了单台服务器存储容量有限的问题
当数据量非常大的时候,一个服务器存放不了,就将数据分成两个或者多个部分,存放在多台服务器上。每个服 务器上的数据,叫做一个分片
二、副本机制
副本备份机制解决了 数据存储的高可用 问题
当数据只保存一份的时候,有丢失的风险。为了更好的容错和容灾,将数据拷贝几份,保存到不同的机器上。
三、总结
分片: 解决单台节点存储容量有限的问题, 通过分片进行分布式存储方案
副本: 增加数据不丢失, 提升数据可用性
尊重原创文章,转载请注明出处与链接:http://www.peixun360.com/1684/news/592829/违者必究! 以上就是长沙达内IT教育培训学校 小编为您整理 大数据Kafka 分片和副本机制的全部内容。