CnOps 社区
首页开源项目实践文章视频课程常见问答开发者工具
导航菜单
首页开源项目实践文章视频课程常见问答开发者工具

CnOps 社区

愿景

CnOps 社区是一个以"智能运维与可观测"为核心的开放、包容、分享的技术社区,旨在聚集运维专家、开发者和爱好者,共同探讨、学习和分享可观测最佳实践与最新技术,与众多技术社区合作互动,共同探讨交叉领域的技术挑战,推动可观测领域的创新与进步。

内容社区

  • 实践文章
  • 视频课程
  • 开源项目
  • 常见问答
  • 开发者工具

友情链接

  • Prometheus
  • Grafana Lab
  • OpenTelemetry
  • LoongCollector

关注我们

阿里云云原生公众号阿里云云原生
阿里云可观测公众号阿里云可观测

Copyright © 2026 CnOps 社区. All rights reserved.

首页问答EMR日志分析新链路如何实现原始日志与核心事件的分离?

EMR日志分析新链路如何实现原始日志与核心事件的分离?

#日志分离#多路输出#Logtail#EMR#SLS

可观测中文社区 | 2025-03-20

EMR日志分析新链路通过Logtail的多路输出机制实现原始日志与核心事件的分离处理。在采集配置中,同一份日志输入经过不同的处理管线分流到不同的目标。核心事件路径使用processor_fields_with_condition插件匹配关键日志模式,提取结构化事件字段后投递到专用的SLS Logstore,用于实时告警和分析。原始日志路径则可以选择采样存储(如只保留1%)、低成本归档或直接丢弃,根据业务需求灵活配置。两条路径独立运行互不干扰,事件的实时性不受原始日志处理策略的影响。这种分离策略使得高价值事件获得最优的处理优先级和存储保障,而低价值原始日志不再占用昂贵的实时存储资源。整体方案在保证监控质量的同时实现了成本最优化。