Size: a a a

2020 November 30

БМ

Борис М in Airflow
Я вот и хотел узнать у спецов :D
источник

VS

Vladislav 👻 Shishkov... in Airflow
выше предлагали cdc
источник

БМ

Борис М in Airflow
CDC  предполагает же манипуляции на источнике?
источник

VS

Vladislav 👻 Shishkov... in Airflow
cdc много чего предполагает - это повод начать копать, если вариант "сравнивать ключи по определенной глубине" уже не устраивают
источник

А

Антон in Airflow
Debezium в помощь)
источник

VN

Viacheslav Nefedov in Airflow
Борис М
CDC  предполагает же манипуляции на источнике?
CDC предполагает настройку триггеров в источнике
источник

БМ

Борис М in Airflow
Viacheslav Nefedov
CDC предполагает настройку триггеров в источнике
Да
источник

VS

Vladislav 👻 Shishkov... in Airflow
Viacheslav Nefedov
CDC предполагает настройку триггеров в источнике
не всегда
источник

VN

Viacheslav Nefedov in Airflow
Не всегда в явном виде :)
источник

VN

Viacheslav Nefedov in Airflow
Есть ещё вариант с подсчётом хэш-сумм в источнике
источник

VS

Vladislav 👻 Shishkov... in Airflow
не всегда на истониче есть триггеры как класс
источник

VS

Vladislav 👻 Shishkov... in Airflow
Viacheslav Nefedov
Есть ещё вариант с подсчётом хэш-сумм в источнике
это вариант из разряда "сравнивать ключи по определенной глубине"
источник

БМ

Борис М in Airflow
Viacheslav Nefedov
Есть ещё вариант с подсчётом хэш-сумм в источнике
Да, но простой чексам не всегда уникальный, а даже простой честный хеш- тяжело
источник

БМ

Борис М in Airflow
Vladislav 👻 Shishkov
это вариант из разряда "сравнивать ключи по определенной глубине"
+
источник

VN

Viacheslav Nefedov in Airflow
А что за источник?
источник

БМ

Борис М in Airflow
Hpsm
источник

БМ

Борис М in Airflow
Там не технический барьер
источник

БМ

Борис М in Airflow
А политический
источник

БМ

Борис М in Airflow
источник

IL

Ilya Lozhkin in Airflow
Как то можно нагрузку DagFileProcessor опустить?
перманентно дрежит la 4+
источник