M
Size: a a a
2020 September 21
KR
если кратко: есть камеры, которые мониторят ситуацию на дорогах, распознают обстановку и заливают это все в БД, платформа в свою очередь позволяет напрямую подключаться к этим камерам , стримить изображение, а также формировать отчёты по распознанным изображениям
AP
привет!
имею проблему - медленная загрузка файлов с EC2 на S3 через aws s3 sync
регион - eu-central-1
версия AWS клиента - aws-cli/2.0.36
инстанс EC2 - i3.xlarge
диск EBS - sc1 , 1 TB
размер файла 500GB (большой файл на 500гб и много мелких, затык на большом)
скорость - 11.4 MiB/s
S3 бакет - в том же регионе что и инстанс
подскажите пожалуйста - можно ли увеличить скорость синка с EBS на S3 ?
скорость 11 MiB/s как то слишком мало, непонятно где тонкое место
имею проблему - медленная загрузка файлов с EC2 на S3 через aws s3 sync
регион - eu-central-1
версия AWS клиента - aws-cli/2.0.36
инстанс EC2 - i3.xlarge
диск EBS - sc1 , 1 TB
размер файла 500GB (большой файл на 500гб и много мелких, затык на большом)
скорость - 11.4 MiB/s
S3 бакет - в том же регионе что и инстанс
подскажите пожалуйста - можно ли увеличить скорость синка с EBS на S3 ?
скорость 11 MiB/s как то слишком мало, непонятно где тонкое место
Надо использовать vpc gateway: будет быстрее и трафик в 10 раз дешевле.
M
Kir Rtischev
если кратко: есть камеры, которые мониторят ситуацию на дорогах, распознают обстановку и заливают это все в БД, платформа в свою очередь позволяет напрямую подключаться к этим камерам , стримить изображение, а также формировать отчёты по распознанным изображениям
и клиенту при этом надо знать какого сервиса сколько каждый юзер использовал ?
KR
по задумке заказчика - да. грубо говоря будет несколько организаций, внутри этих организаций разное количество юзеров. соответственно ежемесячно должен генериться инвойс на организацию, где видно сколько каждый юзер наюзал в деньгах.
KR
вот если смотреть, то - каждая организация за месяц будет платить конкретный прайс, который состоит из 3 частей, и вот 1 часть - это мощности АВС, которые были использованы юзерами этой организации.
KR
честно говоря - пока непонятно. т.к. только в процессе разработки
KR
ну вот поэтому и думали использовать кинезис стримс, но там нюанс, что нужно брать ртсп поток и транскодить в hls для браузера, но он такого не позволяет
KR
интересная мысль, но как тогда хэндлить нестандартные загрузки в тот же с3, чтобы случайно не уйти в серьезный минус?