парни, кто нибудь работал с AWS EMR? столкнулись с плавающей ошибкой - InvalidPart. При multipart загрузке данных в S3. Причем на одних и тех же данных , то выпадает этот exception , то нет. Может есть у кого идет как это пофиксить?
2020-07-12T02:10:04,451 INFO [load-dynamic-partitions-0([])]: s3n.MultipartUploadOutputStream (
MultipartUploadOutputStream.java:doMultiPartUpload(439)) - completeMultipartUpload error for key: data/prod/metric_agg/partition_date=2020-07-10/legacy_company=ЕКУ/metric_cat=client_metr/03а022_0
com.amazon.ws.emr.hadoop.fs.shaded.com.amazonaws.services.s3.model.AmazonS3Exception: One or more of the specified parts could not be found. The part may not have been uploaded, or the specified entity tag may not match the part's entity tag. (Service: Amazon S3; Status Code: 400; Error Code: InvalidPart; Request ID: 5D041D110F75DFEF; S3 Extended Request ID: wnCewEY0kq5ZZRUKcOwlK0ZQEUKHYnbjsW++C4Vf2xhJlU70pENNkX90aSXdnctZfwGGNFwUHT8=)
вот такая хрень выскакивает, время от времени