S🕶
Size: a a a
2021 January 05
S🕶
Таким образом можно работать как с примитивной FS практически
здорово
S🕶
Таким образом можно работать как с примитивной FS практически
я видел такую штуку как storage gateway + s3, может с этим можно что-то сделать?
VM
я видел такую штуку как storage gateway + s3, может с этим можно что-то сделать?
Это имеет смысла вне aws городить
VM
Для лямбд оно не нужно
DZ
я просто подумал а вот на будущее, если будут большие файлы и я такой ахтунг
так s3fs все равно локально файл копирует же, вроде бы goofys без этого но я с ним не сталкивался https://github.com/s3fs-fuse/s3fs-fuse/issues/1257#issuecomment-604880046
S🕶
Это имеет смысла вне aws городить
я так понимаю - чтоб просто другие сервисы получали доступ к файлам удаленно
S🕶
Dmytro Zavalkin
так s3fs все равно локально файл копирует же, вроде бы goofys без этого но я с ним не сталкивался https://github.com/s3fs-fuse/s3fs-fuse/issues/1257#issuecomment-604880046
я думал он диск монтирует как file storage, вот когда я использовал efs,
он просто монтировал диск в /mnt/testik и я туда скидывал что хотел
он просто монтировал диск в /mnt/testik и я туда скидывал что хотел
DZ
я так понимаю - чтоб просто другие сервисы получали доступ к файлам удаленно
> AWS Storage Gateway connects an on-premises software appliance with cloud-based storage to provide seamless integration with data security features between your on-premises IT environment and the AWS storage infrastructure. You can use the service to store data in the AWS Cloud for scalable and cost-effective storage that helps maintain data security.
DZ
это грубо тот же s3fs с локальным кешем но не в амазоне а в своем дц и это отдельная железка или виртуалка
DZ
я думал он диск монтирует как file storage, вот когда я использовал efs,
он просто монтировал диск в /mnt/testik и я туда скидывал что хотел
он просто монтировал диск в /mnt/testik и я туда скидывал что хотел
s3fs так не умеет, goofys может умеет но хз. Задача с текущим описанием сильно проще чем эти 2 инструмента, возможно даже проще просто поднять EC2 инстанс и там запускать эту странную программу что не умеет в S3 (а файлы ей подкачивать или куском питон кода или через тот же s3fs т.к. на инстансе уже нет проблем с объемом локального диска)
S🕶
Dmytro Zavalkin
s3fs так не умеет, goofys может умеет но хз. Задача с текущим описанием сильно проще чем эти 2 инструмента, возможно даже проще просто поднять EC2 инстанс и там запускать эту странную программу что не умеет в S3 (а файлы ей подкачивать или куском питон кода или через тот же s3fs т.к. на инстансе уже нет проблем с объемом локального диска)
я так изначально делал, но все токи лучше lambda, но я делал это на hetzner,
программа уже настроена и написана под lambdas
программа уже настроена и написана под lambdas
S🕶
Dmytro Zavalkin
s3fs так не умеет, goofys может умеет но хз. Задача с текущим описанием сильно проще чем эти 2 инструмента, возможно даже проще просто поднять EC2 инстанс и там запускать эту странную программу что не умеет в S3 (а файлы ей подкачивать или куском питон кода или через тот же s3fs т.к. на инстансе уже нет проблем с объемом локального диска)
как я отправлю в ec2 действие - что надо взять такой-то файл и направить вот сюда,
если программа поделяна на много кусочков уже под lambda,
я же не смогу из lambda, послать запрос в ec2, чтоб там что-то программа мне ссделала
у меня программы уже поделяны на куски и под lambda написаны, через ec2 инстанс не очень удобно будет к сожалению,
я изначально все делал на hetzner cloud, но это было очень неудобно.
если программа поделяна на много кусочков уже под lambda,
я же не смогу из lambda, послать запрос в ec2, чтоб там что-то программа мне ссделала
у меня программы уже поделяны на куски и под lambda написаны, через ec2 инстанс не очень удобно будет к сожалению,
я изначально все делал на hetzner cloud, но это было очень неудобно.
AS
вообще вся проблема в этом сейчас, потому что я не хочу платить за nat gateway, а он нужен потому что использую efs,
где требуется настройка vpc, subnet, а чтоб lambda могла ходит в интернет, нужен nat за 32$ + плюс стоимость трафика отдельно.
где требуется настройка vpc, subnet, а чтоб lambda могла ходит в интернет, нужен nat за 32$ + плюс стоимость трафика отдельно.
Попробуй еще посмотреть NAT instance. На слабых инстансах это будет дешевле.
AP
Обычно такие коммитменты хоть где-то видны постфактум, а тут — ничего, даже в хистори суппорта нет запроса на изменение условий пользования. Может, знаете, как такой контракт можно найти сейчас на аккаунте? Суппорт пока молчит.
Найти своего account manager и спросить, без него контракт маловероятно что кто то оформил. Если не знаете его, то могу помочь найти. Отправьте мне ваш account id на адрес patrushe@amazon.lu
AP
надо на диск именно, там программа другая не умеет считывать стримы, s3 и прочее - только вот так умеет работать с файлами,
которые лежат на диске.
которые лежат на диске.
Ещё вариант уложить эти файлы а layers, но я не помню какое там ограничение по размеру.
DZ
как я отправлю в ec2 действие - что надо взять такой-то файл и направить вот сюда,
если программа поделяна на много кусочков уже под lambda,
я же не смогу из lambda, послать запрос в ec2, чтоб там что-то программа мне ссделала
у меня программы уже поделяны на куски и под lambda написаны, через ec2 инстанс не очень удобно будет к сожалению,
я изначально все делал на hetzner cloud, но это было очень неудобно.
если программа поделяна на много кусочков уже под lambda,
я же не смогу из lambda, послать запрос в ec2, чтоб там что-то программа мне ссделала
у меня программы уже поделяны на куски и под lambda написаны, через ec2 инстанс не очень удобно будет к сожалению,
я изначально все делал на hetzner cloud, но это было очень неудобно.
Так а почему нельзя отправить файл из лямбды напрямую инстансу, что мешает?
LB
Парни а кто знает почем aws билит трафик для netflix, в открытых источниках не нашел хоть какой то инфы
и не найдешь :)