SLS 数据总线通过多层次的流控和稳定性机制保障百PB级数据流量下的可靠运行。在粗粒度流控层面,采用 Project 级别流控:上千个 Nginx 前端汇总各 Project 的流量和请求次数发送至 QuotaServer,QuotaServer 判断是否超过 Quota 上限并将超限 Project 列表通知所有 Nginx 前端,在前端即拒绝请求防止流量穿透后端。在细粒度流控层面,每个 Shard 明确定义处理能力(如 5MB/s 写入、10MB/s 读取),当 Shard 队列堵塞时根据流量是否超过 quota 返回限流或系统错误,并通过 QuotaServer 瞬时同步限流信息至所有 Nginx。此外,LogHub 支持单机 failover 不影响正常写入,Shard 支持毫秒级弹性扩缩容应对流量洪峰,数据加工服务通过 K8s HPA 实现计算力弹性伸缩,整套架构经过阿里多年双十一大促场景的考验。




