我的系统将json文件放在已分区的S3存储桶中,尽管我到处读取的上传到S3的文件在上传完成之前都是不可见的,但出现以下异常
频谱扫描错误。压缩文件意外结束。文件可能是 被截断。 文件= https://s3.us-east-1.amazonaws.com/bucket/partition_day_date=2020-04-03//partition_abc_id=276/data.json.gz 打开缓冲区时发生离子/ JSON流错误:读取错误。在文件中 'https://s3.us-east-1.amazonaws.com/bucket/partition_day_date=2020-04-03/partition
正如我的日志和s3的最后修改日期所暗示的,这是同时发生的,在尝试通过控制台访问文件后,文件似乎还可以。
如果在上载文件时未访问文件,还有什么其他原因?