Size: a a a

SDS и Кластерные FS

2020 November 18

i

ivdok in SDS и Кластерные FS
George
ну так разложи по директориям, антипаттерн же
От этого их количество не уменьшится, это просто визуально скроет проблему
источник

G

George in SDS и Кластерные FS
ivdok
От этого их количество не уменьшится, это просто визуально скроет проблему
Вопрос в эффективности доступа
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
Adolf Stallman
С фига бы?
А с чего бы нет? Можно вот тест провести, насколько быстрее например Nginx раздает картинки чем постгрес сверху которого еще висит что-то что их вытаскивает из субд
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
Можно даже сделать еще проще, сравнить например через бек, только в одном случае он бинарные данные тащить из СУБД, а во втором тупо файловым дсотупом
источник

AS

Adolf Stallman in SDS и Кластерные FS
Alexey Vasilyev
А с чего бы нет? Можно вот тест провести, насколько быстрее например Nginx раздает картинки чем постгрес сверху которого еще висит что-то что их вытаскивает из субд
Сходить по индексу блоб застримить с диска - где тут x2?
источник

AS

Adolf Stallman in SDS и Кластерные FS
Ну и, мы сравнивали, конечно
источник

AS

Adolf Stallman in SDS и Кластерные FS
Нет там никаких двух раз
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
На каком типе, на bytea или который расширение?
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
точнее через large object
источник

AS

Adolf Stallman in SDS и Кластерные FS
Alexey Vasilyev
На каком типе, на bytea или который расширение?
Который расширение
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
Можно тогда кстати по быстрому ради научного интереса организовать тест.
Взять например 10К файлов, размером по 20К например, запихать их тремя разными методами
1. как файлы
2. как bytea
3. как lo
Сделать бекенд, что будет отдавать их тремя разными методами и напустить на это дело например ab
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
Adolf Stallman
Который расширение
И сколько разница была и при каких условиях?
источник

AS

Adolf Stallman in SDS и Кластерные FS
Alexey Vasilyev
И сколько разница была и при каких условиях?
Да никто ab не запускал, конечно, измеряли просто время отдачи
Ну, было миллисекунд 10, по моим воспоминаниям
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
А как тогда сравнивали?
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
Типа была программка, читает файл тупо с диска и читает с постгреса?
источник

AS

Adolf Stallman in SDS и Кластерные FS
Alexey Vasilyev
А как тогда сравнивали?
Да никак не сравнивали
Зафига нам сравнивать-то было? Просто убедились, что лейтенси приемлемая
источник

AV

Alexey Vasilyev in SDS и Кластерные FS
Ну может он тогда с диска вообще за 1ms читает :)
источник

k

kvaps in SDS и Кластерные FS
Alex
блять, ну почему никто не пробовал хранить файлы на ФС?
Что касается кластерных файловых систем то с POSIX тут всё крайне плохо
источник

k

kvaps in SDS и Кластерные FS
Виталий На Заборе
Не, я чисто про то, что неужели есть базы, в которых хорошо хранить блобы...
Ну как бы seaweedfs и есть своего рода база
источник

ВН

Виталий На Заборе... in SDS и Кластерные FS
kvaps
Ну как бы seaweedfs и есть своего рода база
Ну тогда и цеф своего рода база
источник