SLS 的数据导入功能针对大规模历史数据场景提供了任务切片和断点续传能力。历史数据导入支持按索引或按时间片切分任务,将大任务拆解为多个可管理的小单元。当某个切片任务失败时,可以从任务进度处恢复执行,无需从头重跑整个导入作业。对于特定时间片的数据问题,还支持针对指定时间片重跑补数。同时,系统提供并发上限和速率限制配置,避免导入过程中对源端 OpenSearch 造成过大压力。导入任务还配备统计与报表功能,可以实时监控每个切片的进度、吞吐和失败情况。这种设计确保即使在数十 TB 级别的历史数据迁移中,也能安全、可控地完成数据搬迁。
加载中...