NS
Куча мелких файлов для ФС это всегда боль
а файлы в БД это не боль?
Size: a a a
2021 March 01
as
а файлы в БД это не боль?
А с чего они в в бд? бд - само по себе, файло - само по себе
VZ
а файлы в БД это не боль?
ну как сказать - лучше Смотря какая БД и что делаем с файлами , точнее они там уже не совсем файлы
AP
Главное ещё не забывать что файлы просто кучей в одной папке лучше не хранить
VZ
но печальный опыт с dbmail был =) Но наверно я его не умел готовить
AP
У нас дела пошли в гору когда стали по дням или неделям бакеты дробить
as
У нас дела пошли в гору когда стали по дням или неделям бакеты дробить
все там нормально с этим - по ИД клиента файло разносится
VZ
в общем я бы кучу мелких файлов как вы хотите не делал бы такой кластер =) Скорее всего рано или поздно выстрелите в ногу
as
в общем я бы кучу мелких файлов как вы хотите не делал бы такой кластер =) Скорее всего рано или поздно выстрелите в ногу
А каком кластере идет речь? На гластер фс?
AP
Обычно самая жесть это файлики удалять, у нас ттл почти у всего, и если не дробить по дате, ооочень долгие сканы и быстрый расход ресурсов ssd
VZ
Да любой , кроме ceph. Там есть механизмы разнесения - но и там бы я этого не делал Явно задача с мелкими укладывается в БД Но надо знать контекст файлов, что бы продолжать , что то предлагать в качестве решения В любом из вариантов надо пробовать . Может им монга зайдет ? Одна будет RW, другая только на RO.
VZ
но это просто размышления
VZ
у Minio будет большой оверхед
VZ
и там то же можно серьезно упереться в лимиты, хотя она там вся такая безлимитная итд итп
as
Да любой , кроме ceph. Там есть механизмы разнесения - но и там бы я этого не делал Явно задача с мелкими укладывается в БД Но надо знать контекст файлов, что бы продолжать , что то предлагать в качестве решения В любом из вариантов надо пробовать . Может им монга зайдет ? Одна будет RW, другая только на RO.
коллега, ну не будут файлы в бд. как еще еще написать? Приложение есть и работает - ничего внутри менять не будут
AP
Seaweedfs, простое масштабирование, репликация по узлам, полкам, дц, недавно горячее-холодное хранилище завезли и тп
AP
Но туда лучше через апи писать имхо
VZ
Seaweedfs, простое масштабирование, репликация по узлам, полкам, дц, недавно горячее-холодное хранилище завезли и тп
у него же там виндовое приложение
AP
Для append-only имхо пушка
AP
у него же там виндовое приложение
Так оно ж на го, правда хз что там с монтированием на винде.