Size: a a a

Saint P Ruby Community

2020 August 12

CM

Cucumba Morozov in Saint P Ruby Community
А конференции это ещё и про темы, на которые можно поболтать. Я вот очень хочу на всякие нерубишные конфы ездить и говорить, как я кайфую от штук в руби

Да и пофиг, что многие там питонисты или рубисты. Они потом будут со мной говорить, и мы с ними поболтаем про разницу, сходства языков, про какие-то подходы и т.п.
источник

AK

Artem Krivonozhko in Saint P Ruby Community
Zamira Norova
А мне вот самооценка не позволит.
Всегда уверена, что люди и сами могут допереть до этого. Или.. уже в курсе что к чему.
Зря-зря-зря-зря
источник

VE

Vitaliy Emeliyantsev in Saint P Ruby Community
Zamira Norova
А мне вот самооценка не позволит.
Всегда уверена, что люди и сами могут допереть до этого. Или.. уже в курсе что к чему.
Много лет не выходил в обучение, думая тоже так
источник

VD

Vla Dem in Saint P Ruby Community
wi11son
пшш, пшш, выступить, пшш, пшшп (белый шум), пшшш, 27 авг, митап (пшш)
А, я думал, уже на осень собираете; в августе я, пожалуй, пас.
источник

w

wi11son in Saint P Ruby Community
Vla Dem
А, я думал, уже на осень собираете; в августе я, пожалуй, пас.
онлайн?
источник

VD

Vla Dem in Saint P Ruby Community
wi11son
онлайн?
Да че-то неохота 🙂
источник
2020 August 13

AD

Anton Davydov in Saint P Ruby Community
народ, вопрос: как вы обычно обрабатываете разом кучу джоб (1к+, heavy write) в условном сайдкике?
источник

AD

Anton Davydov in Saint P Ruby Community
при этом я хочу что бы база не легла, там куча запросов будет и не хочется забить все нафиг
источник

ZN

Zamira Norova in Saint P Ruby Community
Anton Davydov
народ, вопрос: как вы обычно обрабатываете разом кучу джоб (1к+, heavy write) в условном сайдкике?
Давным давно когда админила один кол центр, там был софт который писал подобные задачи в таблицу базы, и обрабатывал процедурками 🙈
источник

AN

Artem Napolskih in Saint P Ruby Community
Anton Davydov
народ, вопрос: как вы обычно обрабатываете разом кучу джоб (1к+, heavy write) в условном сайдкике?
ограничивай кол-во воркеров, разделяй нагрузку - она база мастер, одна для отчетов и тп.серврер джоб
источник

ME

Makar Ermokhin in Saint P Ruby Community
Anton Davydov
народ, вопрос: как вы обычно обрабатываете разом кучу джоб (1к+, heavy write) в условном сайдкике?
Ну можно их по времени разнести, либо использовать что то по типу sidekiq-limit-fetch
источник

AK

Artem Krivonozhko in Saint P Ruby Community
Anton Davydov
народ, вопрос: как вы обычно обрабатываете разом кучу джоб (1к+, heavy write) в условном сайдкике?
Можно последовательно небольшими батчами
источник

SP

Sergey Ponomarev in Saint P Ruby Community
Вообще лучше как раз относительно большими батчами под одной транзакцией на батч
источник

SP

Sergey Ponomarev in Saint P Ruby Community
То есть тебе надо группить эти джобы в идеале
источник

SP

Sergey Ponomarev in Saint P Ruby Community
А для условного сайдкика ты найдёшь условный гем 😉
источник

ZN

Zamira Norova in Saint P Ruby Community
Sergey Ponomarev
То есть тебе надо группить эти джобы в идеале
Я бы не была столь категоричной говоря, что это "в идеале" 👻
источник

AD

Anton Davydov in Saint P Ruby Community
Sergey Ponomarev
Вообще лучше как раз относительно большими батчами под одной транзакцией на батч
интересно, т.е. вместо 1к транзакций последовательных лучше сделать условно 20 транзакций, но крупных?
источник

CM

Cucumba Morozov in Saint P Ruby Community
Anton Davydov
при этом я хочу что бы база не легла, там куча запросов будет и не хочется забить все нафиг
* читаю с реплики, если можно
* выделяю отдельную очередь под эту задачу
* ограничиваю количество задач, которые процесс может параллельно обрабатывать
источник

SP

Sergey Ponomarev in Saint P Ruby Community
Anton Davydov
интересно, т.е. вместо 1к транзакций последовательных лучше сделать условно 20 транзакций, но крупных?
Да. Но можно теоретически переборщить. Но я даже не представляю какой это объём должен быть данных
источник

SP

Sergey Ponomarev in Saint P Ruby Community
Zamira Norova
Я бы не была столь категоричной говоря, что это "в идеале" 👻
🤷‍♂️
источник