SPL除了在Flink SLS Connector的消费场景中使用外,还支持多种应用场景。在Logtail采集端,可以使用SPL对数据进行预处理,实现采集时的数据清洗和格式化。在SLS的Scan查询模式中,SPL也可以用于高效的数据扫描和分析。SPL支持对数据进行正则字段展开、JSON字段解析、CSV字段展开等非结构化数据处理。同时支持数据格式转换、列的增加和减少、行过滤等操作。这意味着用户可以在数据的整个生命周期中——从采集、存储到消费——都能使用统一的SPL语法进行数据处理,降低了学习和维护成本。




