客户遇到了两个问题:1. 在将s3到sls的日志入库任务切换到sqs后,新的导入任务没有数据;2. 加工任务在开启后的头十分钟无法看到任何数据,经过排查发现数据同步存在延迟。
对于第一个问题,原因是由于初期使用的API请求限制导致一次只能处理少量数据,并且Bucket中的无用文件过多,进而导致了一段时期内的数据导入中断。解决方案是建议采用SLS提供的sqs方式进行日志处理。对于第二个问题,原因是初始查看时只有部分状态更新到控制面板中,包括加工进度、源存储桶等状态参数。解决方法是将检查的时间跨度加大,使所有状态及时更新。
版权声明:本文内容由阿里云实名注册用户自发贡献,版权归原作者所有,阿里云开发者社区不拥有其著作权,亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容,填写侵权投诉表单进行举报,一经查实,本社区将立刻删除涉嫌侵权内容。