Е
вот у кого в новогдние празники был некий релиз-лок?
Size: a a a
2019 January 15
VL
программист какую-то шляпу вылил
нет, ничего связанного не выкатывалось
Е
+ в чатик
AC
Но, еще раз, gdb attach + backtrace apply
AC
Чего гадать-то
VL
да по факту база просто так не падает обычно
да. Поэтому я даю заведомо непростой кейс, который на моём опыте должен решать человек, умеющий SRE.
Е
strace на воркера и посмотреть что делает
Е
если в локе залип
VL
Но, еще раз, gdb attach + backtrace apply
ок. Никаких действий. Висит 1000 транзакций в idle in transaction, это лимит.
Е
то убивать процессы
VL
то убивать процессы
ок. рестартанули сервис. Всё ожило, через полчаса та же проблема.
AC
ок. Никаких действий. Висит 1000 транзакций в idle in transaction, это лимит.
Ты понимаешь, что именно делает gdb?
AC
Причем - совсем не факт, что трейсить надо именно сторону постгреса
VL
Ты понимаешь, что именно делает gdb?
ты по gdb к приложению или БД коннектишься?
VL
приложение — Go
AC
ты по gdb к приложению или БД коннектишься?
Да как-то без разницы
Начать надо бы с приложения
Начать надо бы с приложения
VL
внутри простая ORM reform
AC
приложение — Go
Это вот неважно
D
это правда, но порой мониторинг случайно не срабатывает, зато срабатывают косвенные алерты
мечта запустить нейросеть которая будет следить за метриками по инфраструктуре. Вот тогда нужен опс датасаентист
VL
Да как-то без разницы
Начать надо бы с приложения
Начать надо бы с приложения
ок. Посмотрели. Не через gdb, просто взяли дамп всех потоков. Увидели, что 100500 горутин ждут коннекта от базы