Size: a a a

SPb Reliability Meetup

2019 January 15

AC

Alexander 😼 Chistyakov in SPb Reliability Meetup
Valentine G
потому что ждут ответа от внешнего сервиса
Но транзакция короткая, угу
источник

AC

Alexander 😼 Chistyakov in SPb Reliability Meetup
Красавцы
источник

VG

Valentine G in SPb Reliability Meetup
:)
источник

AC

Alexander 😼 Chistyakov in SPb Reliability Meetup
Помню, в 2007-м ездил в Москву такую же пургу людям исправлять
источник

VL

Vitaliy Levchenko in SPb Reliability Meetup
Егор
киляй всех :)
ещё раз кильнули, через полчаса опять упало
источник

VG

Valentine G in SPb Reliability Meetup
ну хорошо, а у SRE есть доступ к коду на Go чтобы это увидеть?
источник

VG

Valentine G in SPb Reliability Meetup
Vitaliy Levchenko
ещё раз кильнули, через полчаса опять упало
ну завел на прокси, который всегда 200 отвечает
источник

VG

Valentine G in SPb Reliability Meetup
но лучше не надо
источник

VL

Vitaliy Levchenko in SPb Reliability Meetup
Valentine G
потому что ждут ответа от внешнего сервиса
справедливая мысль. Добавили таймаутов, чтобы точно-точно 10с на внешний запрос на все случаи жизни. Не помогло.
источник

VG

Valentine G in SPb Reliability Meetup
так а как они помогут
источник

AC

Alexander 😼 Chistyakov in SPb Reliability Meetup
Vitaliy Levchenko
справедливая мысль. Добавили таймаутов, чтобы точно-точно 10с на внешний запрос на все случаи жизни. Не помогло.
10с это не очень короткая транзакция, кажется
источник

VG

Valentine G in SPb Reliability Meetup
рефакторинг мне кажется тоже ненадолго спасет
источник

VL

Vitaliy Levchenko in SPb Reliability Meetup
Valentine G
так а как они помогут
гарантируют, что внешний запрос за 10с закончится.
источник

Е

Егор in SPb Reliability Meetup
если go, то pprof/block глянуть
источник

AC

Alexander 😼 Chistyakov in SPb Reliability Meetup
Вы не хотите там в транзакцию обернуть только работу с базой?
источник

Е

Егор in SPb Reliability Meetup
глянуть вообще netstat
источник

Е

Егор in SPb Reliability Meetup
сколько воркеров
источник

Е

Егор in SPb Reliability Meetup
что вообще происходит
источник

AC

Alexander 😼 Chistyakov in SPb Reliability Meetup
Егор
сколько воркеров
Очевидно, что их ровно 1000
источник

Е

Егор in SPb Reliability Meetup
я бы глянуть в реалььном продакшене, по косвенным признакам понятнее станет
источник