Size: a a a

Microsoft Azure Developers (Russian User Group)

2019 May 23

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
🤷‍♂️
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
Ща билинг поищу
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
Служба хранилища выдает такой пункт расходов "Стандартные операции ввода-вывода — блочный BLOB-объект (ГБ)" с 80% всех расходов
источник

4

4c74356b41 in Microsoft Azure Developers (Russian User Group)
Aleksey K
Служба хранилища выдает такой пункт расходов "Стандартные операции ввода-вывода — блочный BLOB-объект (ГБ)" с 80% всех расходов
не особо шарю в билинге
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
Кароч ADF тут не при чем (мало ест)
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
Если бы с сжатием/архивированием разъяснили, то было бы чудесно
источник

4

4c74356b41 in Microsoft Azure Developers (Russian User Group)
а что разъяснять-то
источник

ME

Maxim Erachin in Microsoft Azure Developers (Russian User Group)
они считают цену за транзакцию (в рамках одного региона). вопрос в том, как копировать. если data lake делает это per file, то тогда количество транзакций == количество файлов (при условии 4mb >= file size).  AzCopy делает 'Put Block From URL API`, а оно на стримах и, как раз, оптимизировано
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
2,3 пункты
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
Всем привет! Вопрос по data factory (v2). Копирую 100 Гб между 2 блобами и выходит дороговато (250р за раз). Файлов достаточно много (от 30 до 2 мб каждый), в разных форматах. Сначала снизил integration unit и copy parallelism, но цена не изменилась, только время работы увеличилось.

1. Правильно ли я понял, что бОльшая часть цены в моем случае зависит от количества файлов?
2. Если да, то поможет ли мне сжатие (например, GZip)? Оно делает 1 архив или просто сжимает все файлы по отдельности?
3. Есть ли сжатие, которое подходит для любых форматов файлов? (Похоже, GZip сжимает не все форматы)
4. Есть какие-то идеи как снизить цену?
источник

4

4c74356b41 in Microsoft Azure Developers (Russian User Group)
вы прикалываетесь или что:
источник

4

4c74356b41 in Microsoft Azure Developers (Russian User Group)
4 сотых цента за 10000 операций
источник

4

4c74356b41 in Microsoft Azure Developers (Russian User Group)
ну ладно, за врайт пол цента
источник

4

4c74356b41 in Microsoft Azure Developers (Russian User Group)
это 2.5 цента за 50000 операций
источник

ME

Maxim Erachin in Microsoft Azure Developers (Russian User Group)
стоит попробовать копировать через апи, а не через дата фактори
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
4c74356b41
вы прикалываетесь или что:
Я не "прикалываюсь". Поспокойней, пожалуйста. Сюда и пишу, потому что сам не разобрался.
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
Еще раз. У меня холодный блоб (вы мне показываете горячий). Там не все так тривиально считается, как вы пишете.
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
Копировать я буду через df, так как не хочу делать костыли.
источник

AK

Aleksey K in Microsoft Azure Developers (Russian User Group)
Вопрос у меня был про сжатие ИЛИ оптимизацию настроек в df
источник

DL

Dzmitry Lappo in Microsoft Azure Developers (Russian User Group)
4c74356b41
вы прикалываетесь или что:
Совуа, ты даж тут народ пресуешь, спакуха - всё нормально!
источник