Телеграмм чат группы aws

Подскажите Чарджит ли авс за трафик на загрузку/скачку с s3 если использовать эндпоинт?

AWS, ELB: Allow LoadBalancer for service with sessionAffinity: ClientIP · Issue #13892 · kubernetes/kubernetes

13:52пожаловаться #1

DZ

Dmytro Zavalkin in AWS_ru

YourFatMom

я тут столкнулась с "особенностью" одной в aws eks, мб ктото сталкивался уже тоже: задаю свойству service.spec.sessionAffinity перед деплоем сервиса значение ClientIP, в итоге после деплоя сервис <pending>, я подозреваю что в annotations надо чтото еще добавить
Вот сервис:
apiVersion: v1
kind: Service
metadata:
name: _SERVICE_NAME_
namespace: _NAMESPACE_
annotations:
service.beta.kubernetes.io/aws-load-balancer-internal: 0.0.0.0/0
spec:
selector:
app: _SERVICE_NAME_
type: LoadBalancer
ports:
- name: _SERVICE_NAME_
port: 18630
targetPort: 18630
sessionAffinity: ClientIP
sessionAffinityConfig:
clientIP:
timeoutSeconds: 10800

так ClientIP не поддерживается же https://github.com/kubernetes/kubernetes/issues/13892

GitHub

failed to create external load balancer for service pro/xyz: unsupported load balancer affinity: ClientIP As in understood from http://kubernetes.io/v1.0/docs/user-guide/services.html the service s...

14:02пожаловаться #2

DZ

Dmytro Zavalkin in AWS_ru

Подскажите Чарджит ли авс за трафик на загрузку/скачку с s3 если использовать эндпоинт?

о каком эндпоинте хоть речь? VPC S3 endpoint?

14:03пожаловаться #3

I

Dmytro Zavalkin

о каком эндпоинте хоть речь? VPC S3 endpoint?

да

14:12пожаловаться #4

I

ну вот если я внутри сети через эндпоинт загружаю и скачиваю терабайты

AWS, ELB: Allow LoadBalancer for service with sessionAffinity: ClientIP · Issue #13892 · kubernetes/kubernetes

14:12пожаловаться #5

Y

YourFatMom in AWS_ru

Dmytro Zavalkin

так ClientIP не поддерживается же https://github.com/kubernetes/kubernetes/issues/13892

GitHub

failed to create external load balancer for service pro/xyz: unsupported load balancer affinity: ClientIP As in understood from http://kubernetes.io/v1.0/docs/user-guide/services.html the service s...

ток я не понимаю, куда смотреть, что делать

14:15пожаловаться #6

DZ

Dmytro Zavalkin in AWS_ru

YourFatMom

ток я не понимаю, куда смотреть, что делать

а ничего не делать, можно написать в багтрекер кубера или в спортлото

Y

)))

DZ

Dmytro Zavalkin in AWS_ru

можно еще перейти с нжинкс ингресс на ингресс на ALB - тогда будет работать функционал sticky sessions, насколько я понял из комментариев

14:18пожаловаться #9

DZ

Dmytro Zavalkin in AWS_ru

ну вот если я внутри сети через эндпоинт загружаю и скачиваю терабайты

если настроен в VPC S3 endpoint - то траффик между EC2 и S3 ходит внутри датацентра и значит должно быть бесплатно

14:19пожаловаться #10

Y

YourFatMom in AWS_ru

Dmytro Zavalkin

можно еще перейти с нжинкс ингресс на ингресс на ALB - тогда будет работать функционал sticky sessions, насколько я понял из комментариев

вот да, я тоже так поняла, что типо если ингрессом делать, то будет работать

14:20пожаловаться #11

DZ

Dmytro Zavalkin in AWS_ru

Dmytro Zavalkin

если настроен в VPC S3 endpoint - то траффик между EC2 и S3 ходит внутри датацентра и значит должно быть бесплатно

само собой EC2 инстанс и бакет должны быть в одном датацентре

14:26пожаловаться #12

P

Pavel in AWS_ru

Всем хай! EC2 Instance Connect. Вот такой вот кейс:
действую по инструкции https://docs.amazonaws.cn/en_us/AWSEC2/latest/UserGuide/ec2-instance-connect-set-up.html#ec2-instance-connect-configure-IAM-role
и собственно всё ок, но: в инструкции фигурирует дефолтный юзер, и предлагается ходить под ним, как написать политику, чтоб юзер мог ходить только под собой?

16:37пожаловаться #13

AP

Alexander Patrushev in AWS_ru

Подскажите Чарджит ли авс за трафик на загрузку/скачку с s3 если использовать эндпоинт?

Трафик между S3 и EC2 бесплатный, при нахождении в одном регионе. Это правило касается большенство сервисов (CloudFront, ECR, EMR и тд) «Data transferred between Amazon S3, Amazon Glacier, Amazon DynamoDB, Amazon SES, Amazon SQS, Amazon Kinesis, Amazon ECR, Amazon SNS or Amazon SimpleDB and Amazon EC2 instances in the same AWS Region is free.»
За endpoint есть цена. “There is no additional charge for using gateway endpoints. Standard charges for data transfer and resource usage apply.”
For Frankfurt Pricing per GB data processed ($) is 0,01$

16:44пожаловаться #14

AP

Alexander Patrushev in AWS_ru

Подскажите Чарджит ли авс за трафик на загрузку/скачку с s3 если использовать эндпоинт?

Те если у вас нет явной необходимости в endpoint, то не надо его использовать. Трафик и так не через «весь» интернет пойдёт.

16:45пожаловаться #15

P

Pavel in AWS_ru

нет, это позвлолит стартовать/тушить тачки на основе тага...

16:46пожаловаться #16

P

Pavel in AWS_ru

если я это условие применю для ec2-instance-connect:SendSSHPublicKey
то я смогу залогиниться на машину под любым юзером

16:48пожаловаться #17

I

Alexander Patrushev

Те если у вас нет явной необходимости в endpoint, то не надо его использовать. Трафик и так не через «весь» интернет пойдёт.

т.е. вы хотите сказать что если к примеру из ec2 обращусь к s3, например скачать пачку файлов в терабайт, а ec2 у меня за nat, то траффик разве не через nat пойдет?

16:59пожаловаться #18

AP

Alexander Patrushev in AWS_ru

т.е. вы хотите сказать что если к примеру из ec2 обращусь к s3, например скачать пачку файлов в терабайт, а ec2 у меня за nat, то траффик разве не через nat пойдет?

Нет, такого я точно не хочу сказать ). В этом случае endpoint будет сильно выгоднее.
Ответ зависит от всех переменных в задаче и необходимость и факт наличия nat gw меняет ситуацию.

17:02пожаловаться #19

I

Alexander Patrushev

Нет, такого я точно не хочу сказать ). В этом случае endpoint будет сильно выгоднее.
Ответ зависит от всех переменных в задаче и необходимость и факт наличия nat gw меняет ситуацию.

спасибо, тогда уточню. Есть несколько EC2 которые находятся в приватной сети, т.е. за nat gw. Нужно скачивать порядка 2-3 тербайта в день (последовательно). Сейчас я так понимаю что использование vpc endpoint s3 будет сильно экономичнее в плане счета за траффик. Сохранится ли такое же условие при использовании vpc endpoint s3 со storage gateway, когда маунтишь s3 как файловую систему?