Телеграмм чат группы python_kz страница 1015

parrot.ru

Рейтинг популярных групп и каналов

В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Python KZ

1101 membersпожаловаться на группу

2020 September 04

A

Azamat in Python KZ

Всем привет! Никто не сталкивался с такой проблемой в Redis.

aioredis.errors.ReplyError: MISCONF Redis is configured to save RDB snapshots, but it is currently not able to persist on disk. Commands that may modify the data set are disabled, because this instance is configured to report errors during writes if RDB snapshotting fails (stop-writes-on-bgsave-error option). Please check the Redis logs for details about the RDB error.

После гугления понял что либо не хватает место в машине (не мой случай так как места хватает)
Проблема в каталогах куда складываются данные, нужно давать какие то особые права на папки в ОС где лежит Redis cluster?

точно не помню, но скорее всего есть какой-нить пользователь redis у которого должен быть доступ в эту директорию

источник

09:49пожаловаться #1

RJ

R J in Python KZ

Вряд ли доступ к директории/файлу взял и изменился сам по себе, если все-таки нет rw прав попробуй прописать chmod 660 <filename>

источник

10:49пожаловаться #2

RJ

R J in Python KZ

И на всякий лучше проверить какие файлы открыты процессом:
lsof -p <PID>

источник

10:52пожаловаться #3

A

Asset in Python KZ

Всем привет!

кто-нибудь знает курсы Vault77 проводятся? Оставлял заявку, но фидбэка не получил(

источник

12:13пожаловаться #4

M

Mr.Temirlan in Python KZ

Вряд ли доступ к директории/файлу взял и изменился сам по себе, если все-таки нет rw прав попробуй прописать chmod 660 <filename>

Верно сказано.
В общем Redis всегда оставляет 50% в ОЗУ от хранимого чтобы сделать snapshot через child process в Linux ОС, у меня эти лимиты превышены, и я решил для эксперемента отключить эту настройку

vm.overcommit_memory = 1

так вот как память заполняется полностью, в скрипте решил усыплять таску, чтобы не был у таски статус destroyed.
Теперь буду смотреть как часть данных ложить на жесткий диск при этом освобождая ОЗУ.
Всем спасибо!

Zalando Engineering Blog

Zalando Engineering Blog - Understanding Redis Background Memory Usage

A closer look at how the Linux kernel influences Redis memory management

источник

14:36пожаловаться #5

A

Azamat in Python KZ

Всем привет!

кто-нибудь знает курсы Vault77 проводятся? Оставлял заявку, но фидбэка не получил(

Нет, школа закрылась. Я там преподавал. Может позже что-то свое сделаю

источник

15:04пожаловаться #6

RJ

R J in Python KZ

1. Можно вместо RDB юзать AOF, не будет объемных снапшотов.
2. Читал best practice увеличивать swap, тогда часть данных перейдет на постоянное хранилище (медленно конечно будет работать).
3. Поднять несколько инстансов на одном сервере, получается дробишь будущие снапшоты и серверу легче.

источник

15:05пожаловаться #7

A

Azamat in Python KZ

Верно сказано.
В общем Redis всегда оставляет 50% в ОЗУ от хранимого чтобы сделать snapshot через child process в Linux ОС, у меня эти лимиты превышены, и я решил для эксперемента отключить эту настройку

vm.overcommit_memory = 1

так вот как память заполняется полностью, в скрипте решил усыплять таску, чтобы не был у таски статус destroyed.
Теперь буду смотреть как часть данных ложить на жесткий диск при этом освобождая ОЗУ.
Всем спасибо!

Zalando Engineering Blog

Zalando Engineering Blog - Understanding Redis Background Memory Usage

A closer look at how the Linux kernel influences Redis memory management

Вообще у редиса можно неплохо так поколдавать над его настройками и системными, зависит от цели. Для чего ты его используешь?

источник

15:05пожаловаться #8

M

Mr.Temirlan in Python KZ

1. Можно вместо RDB юзать AOF, не будет объемных снапшотов.
2. Читал best practice увеличивать swap, тогда часть данных перейдет на постоянное хранилище (медленно конечно будет работать).
3. Поднять несколько инстансов на одном сервере, получается дробишь будущие снапшоты и серверу легче.

дельные советы! спасибо!

источник

15:06пожаловаться #9

M

Mr.Temirlan in Python KZ

Вообще у редиса можно неплохо так поколдавать над его настройками и системными, зависит от цели. Для чего ты его используешь?

Валидировать кеш + у нас на проекте есть событийная модель и часть легковесных данных в виде текста хранятся в виде постоянного хранилища.
1 сервис создает ключ-значение, много других дополняют, и финальный забирает данные

источник

15:07пожаловаться #10

RJ

R J in Python KZ

И еще, видимо у вас "save" настроен на больший интервал. Попробуйте настроить save 60 OPS/1.5, где OPS текущее значение операций

источник

15:12пожаловаться #11

M

Mr.Temirlan in Python KZ

И еще, видимо у вас "save" настроен на больший интервал. Попробуйте настроить save 60 OPS/1.5, где OPS текущее значение операций

нет все через BGSAVE

источник

15:14пожаловаться #12

RQ

Rawan Qurmet in Python KZ

вообще, интересная фигня, оф доки питона юзают одинарные кавычки в примерах, а ПЕП рекомендует двойные

источник

15:20пожаловаться #13

БШ

Бекзат Шаяхметов... in Python KZ

вообще, интересная фигня, оф доки питона юзают одинарные кавычки в примерах, а ПЕП рекомендует двойные

Пеп не рекомендует двойные ведь не? Он рекомендует не смешивать

источник

15:22пожаловаться #14

RQ

Rawan Qurmet in Python KZ

возможно так, я себе ставил давно прехуки и https://pypi.org/project/black/
который меняет одинарные на двойные)

The uncompromising code formatter.

источник

15:24пожаловаться #15

A

Admet in Python KZ

источник

15:24пожаловаться #16

RQ

Rawan Qurmet in Python KZ

пожалуй выключу в настройках

источник

15:24пожаловаться #17

RQ

Rawan Qurmet in Python KZ

могу помочь настройть прекоммит хук в pycharm, если кто затрудняется
хотя, его можно в git hooks запихать

источник

15:25пожаловаться #18

BQ

Beisembayev Qwanysh in Python KZ

вообще, интересная фигня, оф доки питона юзают одинарные кавычки в примерах, а ПЕП рекомендует двойные

Это в докстрингах рекомендуют двойные, а в обычных строках надо просто использовать везде одинаковые

источник

15:27пожаловаться #19

YA

Yernar Akimzhanov in Python KZ

Нет, школа закрылась. Я там преподавал. Может позже что-то свое сделаю

Damn son. Entrepreneur much?

источник

16:14пожаловаться #20