网站建设资讯

NEWS

网站建设资讯

kafka如何保证数据不丢失-创新互联

1. kafka如何保证数据不丢失 1.1 生产者如何保证数据不丢失

创新互联建站专注于钟祥网站建设服务及定制,我们拥有丰富的企业做网站经验。 热诚为您提供钟祥营销型网站建设,钟祥网站制作、钟祥网页设计、钟祥网站官网定制、成都微信小程序服务,打造钟祥网络公司原创品牌,更为您提供钟祥网站排名全网营销落地服务。

ACK机制:

当生产者将数据生产到Broker后, Broker应该给予一个ack确认响应, 在kafka中, 主要提供了三种ack的方案:
 ack=0 : 生产者只管发送数据, 不关心不接收Broker给予的响应
 ack=1 : 生产者将数据发送到Broker端, 需要等待Broker端对应的Topic上对应分片上的主副本接收到消息后, 才认为发送成功了
 ack=-1|ALL: 生产者将数据发送到Broker端, 需要等待Broker端对应的Topic上对应分片上的所有的副本都接收到消息后, 才认为发送成功了
 
 效率角度:  0  >1 >-1
 
 安全角度:  -1 >1 >0
 
 思考: 请问在实际使用中, 使用什么方案呢? 三种都有可能      
 一般要根据消息的重要程度, 来选择对应的方案, 如果数据非常重要, 不能丢失, 选择为 -1 ,如果说无所谓 那么就选择 0 , 可以允许一定丢失 1    同时还要结合生产的速率也要作为一定判定依据

1.2 Broker端如何保证数据不丢失

保证方案: 磁盘存储 + 多副本 + ack为-1

1.3 消费端如何保证数据不丢失

# 博学谷IT 技术支持

你是否还在寻找稳定的海外服务器提供商?创新互联www.cdcxhl.cn海外机房具备T级流量清洗系统配攻击溯源,准确流量调度确保服务器高可用性,企业级服务器适合批量采购,新人活动首月15元起,快前往官网查看详情吧


本文标题:kafka如何保证数据不丢失-创新互联
地址分享:http://cdweb.net/article/dsoegg.html