加入收藏 | 设为首页 | 会员中心 | 我要投稿 湖南网 (https://www.hunanwang.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 教程 > 正文

漫衍式限流,你想知道的都在这里

发布时间:2019-04-25 04:35:15 所属栏目:教程 来源:儒雅程序员
导读:媒介 在一个高并发体系中对流量的把控长短常重要的,当庞大的流量直接哀求到我们的处事器上没多久就也许造成接口不行用,不处理赏罚的话乃至会造成整个应用不行用。 好比最近就有个这样的需求,我作为客户端要向kafka出产数据,而kafka的斲丧者则再绵绵不断的
副问题[/!--empirenews.page--]

媒介

在一个高并发体系中对流量的把控长短常重要的,当庞大的流量直接哀求到我们的处事器上没多久就也许造成接口不行用,不处理赏罚的话乃至会造成整个应用不行用。

好比最近就有个这样的需求,我作为客户端要向kafka出产数据,而kafka的斲丧者则再绵绵不断的斲丧数据,并将斲丧的数据所有哀求到web处事器,虽说做了负载(有4台web处事器)但营业数据的量也是庞大的,每秒钟也许有上万条数据发生。假如出产者直接出产数据的话极有也许把web处事器拖垮。

漫衍式限流,你想知道的都在这里

对此就必必要做限流处理赏罚,每秒钟出产必然限额的数据到kafka,这样就能极洪流平的担保web的正常运转。

着实不管处理赏罚何种场景,本质都是低落流量担保应用的高可用。

常见算法

对付限流常见有两种算法:

  • 漏桶算法
  • 令牌桶算法

漏桶算法较量简朴,就是将流量放入桶中,漏桶同时也凭证必然的速度流出,假如流量过快的话就会溢出(漏桶并不会进步流出速度)。溢出的流量则直接扬弃。

如下图所示:

漫衍式限流,你想知道的都在这里

这种做法简朴粗暴。

漏桶算法虽说简朴,但却不能应对现实场景,好比溘然暴增的流量。

这时就必要用到令牌桶算法:

令牌桶会以一个恒定的速度向牢靠容量巨细桶中放入令牌,当有流量来时则取走一个或多个令牌。当桶中没有令牌则将当前哀求扬弃或阻塞。

对比之命令牌桶可以应对必然的突发流量。

RateLimiter实现

对付令牌桶的代码实现,可以直接行使Guava包中的RateLimiter。

  1. @Override 
  2. public BaseResponse<UserResVO> getUserByFeignBatch(@RequestBody UserReqVO userReqVO) { 
  3.  //挪用长途处事 
  4.  OrderNoReqVO vo = new OrderNoReqVO() ; 
  5.  vo.setReqNo(userReqVO.getReqNo()); 
  6.  RateLimiter limiter = RateLimiter.create(2.0) ; 
  7.  //批量挪用 
  8.  for (int i = 0 ;i< 10 ; i++){ 
  9.  double acquire = limiter.acquire(); 
  10.  logger.debug("获取令牌乐成!,耗损=" + acquire); 
  11.  BaseResponse<OrderNoResVO> orderNo = orderServiceClient.getOrderNo(vo); 
  12.  logger.debug("长途返回:"+JSON.toJSONString(orderNo)); 
  13.  } 
  14.  UserRes userRes = new UserRes() ; 
  15.  userRes.setUserId(123); 
  16.  userRes.setUserName("张三"); 
  17.  userRes.setReqNo(userReqVO.getReqNo()); 
  18.  userRes.setCode(StatusEnum.SUCCESS.getCode()); 
  19.  userRes.setMessage("乐成"); 
  20.  return userRes ; 

详见此。

挪勤奋效如下:

代码可以看出以每秒向桶中放入两个令牌,哀求一次耗损一个令牌。以是每秒钟只能发送两个哀求。凭证图中的时刻来看也确实云云(返回值是获取此令牌所耗损的时刻,差不多也是每500ms一个)。

行使RateLimiter有几个值得留意的处所:

应承先斲丧,后付款,意思就是它可以来一个哀求的时辰一次性取走几个可能是剩下全部的令牌乃至多取,可是后头的哀求就得为上一次哀求买单,它必要守候桶中的令牌补齐之后才气继承获取令牌。

总结

针对付单个应用的限流 RateLimiter 够用了,假如是漫衍式情形可以借助 Redis 来完成。

来做演示。

在 Order 应用提供的接口中采纳了限流。起首是设置了限流器材的 Bean:

  1. @Configuration 
  2. public class RedisLimitConfig { 
  3.  @Value("${redis.limit}") 
  4.  private int limit; 
  5.  @Autowired 
  6.  private JedisConnectionFactory jedisConnectionFactory; 
  7.  @Bean 
  8.  public RedisLimit build() { 
  9.  RedisClusterConnection clusterConnection = jedisConnectionFactory.getClusterConnection(); 
  10.  JedisCluster jedisCluster = (JedisCluster) clusterConnection.getNativeConnection(); 
  11.  RedisLimit redisLimit = new RedisLimit.Builder<>(jedisCluster) 
  12.  .limit(limit) 
  13.  .build(); 
  14.  return redisLimit; 
  15.  } 

接着在 Controller 行使组件:

  1. @Autowired 
  2. private RedisLimit redisLimit ; 
  3. @Override 
  4. @CheckReqNo 
  5. public BaseResponse<OrderNoResVO> getOrderNo(@RequestBody OrderNoReqVO orderNoReq) { 
  6.  BaseResponse<OrderNoResVO> res = new BaseResponse(); 
  7.  //限流 
  8.  boolean limit = redisLimit.limit(); 
  9.  if (!limit){ 
  10.  res.setCode(StatusEnum.REQUEST_LIMIT.getCode()); 
  11.  res.setMessage(StatusEnum.REQUEST_LIMIT.getMessage()); 
  12.  return res ; 
  13.  } 
  14.  res.setReqNo(orderNoReq.getReqNo()); 
  15.  if (null == orderNoReq.getAppId()){ 
  16.  throw new SBCException(StatusEnum.FAIL); 
  17.  } 
  18.  OrderNoResVO orderNoRes = new OrderNoResVO() ; 
  19.  orderNoRes.setOrderId(DateUtil.getLongTime()); 
  20.  res.setCode(StatusEnum.SUCCESS.getCode()); 
  21.  res.setMessage(StatusEnum.SUCCESS.getMessage()); 
  22.  res.setDataBody(orderNoRes); 
  23.  return res ; 

(编辑:湖南网)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

热点阅读