CnOps 智能运维与可观测社区
首页开源项目实践文章视频课程常见问答开发者工具STAROps 专题
导航菜单
首页开源项目实践文章视频课程常见问答开发者工具STAROps 专题

CnOps 智能运维与可观测社区

愿景

CnOps 智能运维与可观测社区是一个以"智能运维与可观测"为核心的开放、包容、分享的技术社区,旨在聚集运维专家、开发者和爱好者,共同探讨、学习和分享可观测最佳实践与最新技术,与众多技术社区合作互动,共同探讨交叉领域的技术挑战,推动可观测领域的创新与进步。

内容社区

  • 实践文章
  • 视频课程
  • 开源项目
  • 常见问答
  • 开发者工具

友情链接

  • Prometheus
  • Grafana Lab
  • OpenTelemetry
  • LoongCollector

关注我们

阿里云云原生公众号阿里云云原生
阿里云可观测公众号阿里云可观测

Copyright © 2026 CnOps 社区. All rights reserved.

首页问答SLS 数据总线如何保障百PB级数据流量下的稳定性?

SLS 数据总线如何保障百PB级数据流量下的稳定性?

#稳定性#流控#百PB#SLS#高可用

可观测中文社区 | 2025-03-20

SLS 数据总线通过多层次的流控和稳定性机制保障百PB级数据流量下的可靠运行。在粗粒度流控层面,采用 Project 级别流控:上千个 Nginx 前端汇总各 Project 的流量和请求次数发送至 QuotaServer,QuotaServer 判断是否超过 Quota 上限并将超限 Project 列表通知所有 Nginx 前端,在前端即拒绝请求防止流量穿透后端。在细粒度流控层面,每个 Shard 明确定义处理能力(如 5MB/s 写入、10MB/s 读取),当 Shard 队列堵塞时根据流量是否超过 quota 返回限流或系统错误,并通过 QuotaServer 瞬时同步限流信息至所有 Nginx。此外,LogHub 支持单机 failover 不影响正常写入,Shard 支持毫秒级弹性扩缩容应对流量洪峰,数据加工服务通过 K8s HPA 实现计算力弹性伸缩,整套架构经过阿里多年双十一大促场景的考验。

推荐文章

超过 2000+ 位开发者正在阅读

给 OpenClaw 加上企业级 Memory

给 OpenClaw 加上企业级 Memory

4646 阅读

阿里云 STAROps 全域智能运维平台发布!

阿里云 STAROps 全域智能运维平台发布!

3453 阅读

阿里云正式发布 RCA Benchmark

阿里云正式发布 RCA Benchmark

2716 阅读

推荐视频

UModel 最佳实践 Vol.1 UModel 数据建模全景解读

UModel 最佳实践 Vol.1 UModel 数据建模全景解读

3854 观看50:35
云监控2.0全景:可观测范式升级与智能运维蓝图

云监控2.0全景:可观测范式升级与智能运维蓝图

2532 观看41:06

推荐工具

精选可观测领域开发者工具

云监

云监控 2.0 沙箱体验

7483 使用

免费

免费网络拨测工具

2746 使用