Q1# 问题整理20210529

共 3033字,需浏览 7分钟

 ·

2021-06-02 12:29

      

        业务要发展,功能要增强,基础设施要完善,变更就无法避免,带来新功能的同时也带来了风险。整理下近期碰到的和被问的几个问题。

问题一

Zookeeper几乎每年都能听到有公司踩到坑,故事往往是这样:@1 多个业务线共用zk集群,某个新上的功能把zk当缓存用,大量创建zk路径,造成zk不堪重负瘫痪;@2 某个新上的功能往zk集群中写入过大消息,单条消息好几兆,造成zk集群性能下降,甚至带宽、磁盘被打满。

知道可能的坑咱肯定不能再去踩了,重要中间件的独立zk集群彻底隔离,上面的问题基本可以避免。今天的故事却发生在watch的数量上。

现象

从4月中旬左右发现zk的watch水位在翻倍增长,从200多万到400多万一直翻到800多万,一直到五一之后的12000万。watch水位的升高会影响与zk通信的延迟。

原因

SDK中有使用一个公共主题用于客户端行为收集,该主题下会被注册临时节点,临时节点会被watch用于一个特定功能。在卡点升级过程中随着服务应用的接入,注册的节点越来越多。例如:3000个临时节点每个节点都会有3000个watch数量,就会有3000的平方个watch数量,就是900万个watch数量

解决

止血方案:删除公共主题下的临时节点,watch数量水位恢复正常

根除方案:剔除SDK中对注册节点的watch,例如:curator中用NodeCacheListener替代TreeCacheListener,同时移除关联节点的wath功能,或者对公共主题进行过滤,不再注册节点

问题二

问: Sentinel的集群限流有预热功能吗?

答: 预热适用于单机限流。

源码

这个问题先从源码角度看看:

public boolean canPassCheck(/*@NonNull*/ FlowRule rule, Context context, DefaultNode node, int acquireCount,
                                                    boolean prioritized)
 
{
        String limitApp = rule.getLimitApp();
        if (limitApp == null) {
            return true;
        }

        if (rule.isClusterMode()) { // 注解@1 集群限流逻辑
            return passClusterCheck(rule, context, node, acquireCount, prioritized);
        }
  
    // 注解@2 单机限流逻辑
        return passLocalCheck(rule, context, node, acquireCount, prioritized);
}

备注:集群限流逻辑:会向token server请求token,如果获取token则放行否则拒绝,没有预热相关逻辑。

下面接着看单机限流:单机限流会有不同类型限流效果的选择,因此预热只有单机限流才存在。

问题三

问: RocketMQ默认消费重试多少次?可以自定义设置吗?

答: 默认消费16次,可以自定义设置消费次数,通过DefaultMQPullConsumer#setMaxReconsumeTimes设置

源码

private int maxReconsumeTimes = 16;

// 注解@1 DefaultMQPullConsumer#setMaxReconsumeTimes
public void setMaxReconsumeTimes(final int maxReconsumeTimes) {
        this.maxReconsumeTimes = maxReconsumeTimes;
}

问题四

问: RocketMQ发送重试次数可以设置吗?

答: 可以的,默认2次重试算上第1次共3次。可以自定义设置重试次数。

// 默认次数
private int retryTimesWhenSendFailed = 2;
// 同步发送重试次数
producer.setRetryTimesWhenSendFailed();
// 异步发送重试次数
producer.setRetryTimesWhenSendAsyncFailed();



浏览 48
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报