MS
Даже и поминутно или даже почасовая не подойдёт для прома. Пром аггрегирует и компримирует данные. Это для биллинга ... Так себе
Size: a a a
2020 June 19
T
Michael Silich
Даже и поминутно или даже почасовая не подойдёт для прома. Пром аггрегирует и компримирует данные. Это для биллинга ... Так себе
ну наверное компримирование ничего плохого в себе не несёт, проблемы то начинаются когда нужно всё это дело скейлить
PK
VM сейчас прожовывакт 25к записей в секунду. Пишется в два стораджа. За месяц получается около 50 гигов. Пром там сдох и половины не осилив
T
VM сейчас прожовывакт 25к записей в секунду. Пишется в два стораджа. За месяц получается около 50 гигов. Пром там сдох и половины не осилив
а посмотреть данные эти возможно?
MS
50гб в месяц это не очень много. Сколько у вас таргетов и как часто опрашивается? (Я тут тоже пром везде запили. Через неделю предстоит. Запилить ещё на 500-600 свитчей. Вот боюсь немного :)
T
на каком временном промежутке оно начинает тормозить?
т.е., за три месяца можно получить статистику?
т.е., за три месяца можно получить статистику?
PK
таргетов порядка 300
PK
раз в 15 секунд.
PK
пром в день на этих данных давал около 10-12 гигов. виктория 1
AM
раз в 15 секунд.
Ну не все, те что в кубе некоторые имеют свои скраб интервалы
PK
прому нужно было около 32 гигов. виктория живет на 8
MS
Ну по Гб сколько он кушает и сколько нам жрет всерогно. Главное чтоб нелагал и не падал :)
PK
скажем так по субъективным оценкам виктория наголову выше прома.
J
Привет. Вляпался в вопрос с зависающими миграциями. Может кто-то сталкивался/видел рецепт?
Newton.
На одной из нод openstack'a случился oom. После этого перестали нормально работать миграции. В том числе и для остальных нод. Перезапуск служб не помогает. По virsh list —all вижу, что инстансы приезжают на целевую ноду, однако в openstack повисает состояние migrating, в базе nova висят указания на исходную ноду, в neutron указания migrating to.
На исходной ноде в node-compute.log болтаются сообщения вида:
Migration operation has completed
Error monitoring migration: The server has either erred or is incapable of performing the requested operation. (HTTP 500)
Live migration failed.
VM Stopped (Lifecycle Event).
После чего периодически повторяющиеся
During sync_power_state the instance has a pending task (migrating). Skip.
При этом на целевой ноде
VM Resumed (Lifecycle Event)
During the sync_power process the instance has moved from host node5 to host node2.
Значения в базе конечно поправить можно (что я и делал), но это помогает ровно до первой лайв-миграции.
Рассинхроны фактического состояния инстансов и тем, что говорит openstack ловил и раньше, но то были случайные какие-то события. Здесь же какое-то повальное влияние на все тестовые инстансы.
С продакшн инстансами, скорее всего, будет то же самое.
Newton.
На одной из нод openstack'a случился oom. После этого перестали нормально работать миграции. В том числе и для остальных нод. Перезапуск служб не помогает. По virsh list —all вижу, что инстансы приезжают на целевую ноду, однако в openstack повисает состояние migrating, в базе nova висят указания на исходную ноду, в neutron указания migrating to.
На исходной ноде в node-compute.log болтаются сообщения вида:
Migration operation has completed
Error monitoring migration: The server has either erred or is incapable of performing the requested operation. (HTTP 500)
Live migration failed.
VM Stopped (Lifecycle Event).
После чего периодически повторяющиеся
During sync_power_state the instance has a pending task (migrating). Skip.
При этом на целевой ноде
VM Resumed (Lifecycle Event)
During the sync_power process the instance has moved from host node5 to host node2.
Значения в базе конечно поправить можно (что я и делал), но это помогает ровно до первой лайв-миграции.
Рассинхроны фактического состояния инстансов и тем, что говорит openstack ловил и раньше, но то были случайные какие-то события. Здесь же какое-то повальное влияние на все тестовые инстансы.
С продакшн инстансами, скорее всего, будет то же самое.
Привет!
А что nova-compute на проблемном сервере? В нормальном состоянии? enabled/up?
Логи смотришь в дебаг режиме?
По твоему описанию ничего непонятно же пока. И, судя по тому, что никто не ответил сходу это не баг какой-то, а экзотическая ситуация. Поэтому без дебага никак.
А что nova-compute на проблемном сервере? В нормальном состоянии? enabled/up?
Логи смотришь в дебаг режиме?
По твоему описанию ничего непонятно же пока. И, судя по тому, что никто не ответил сходу это не баг какой-то, а экзотическая ситуация. Поэтому без дебага никак.
2020 June 23
T
Спасибо, попробую, а то я уже в код залез, исправил)
как успехи?
ГВ
Здравствуйте , а есть здесь у кого-то отпыт работы с
ironic-tempest-plugin ?
ironic-tempest-plugin ?
DT
Здравствуйте , а есть здесь у кого-то отпыт работы с
ironic-tempest-plugin ?
ironic-tempest-plugin ?
У меня есть некоторый, а что нужно?
ГВ
У меня есть некоторый, а что нужно?
Да что-то получаю No valid host was found при выполнении ironic_tempest_plugin.tests.scenario.test_baremetal_basic_ops.BaremetalBasicOps.test_baremetal_server_ops
DT
Надо смотреть в логах nova-scheduler и nova-compute, что там нове не нравится.