А
Size: a a a
2020 December 29
SG
Всем добрый вечер. Кто может подсказать какой пакет python лучше использовать для пакетной вставки строк в таблицу приемник? pandas? Что-то еще есть?
Без особой разницы, все дело лишь в настройках.
Настоящий перформанс появляется, когда вы перестаёте использовать инсёрты
Настоящий перформанс появляется, когда вы перестаёте использовать инсёрты
А
Без особой разницы, все дело лишь в настройках.
Настоящий перформанс появляется, когда вы перестаёте использовать инсёрты
Настоящий перформанс появляется, когда вы перестаёте использовать инсёрты
для постгри COPY
VR
Всем добрый вечер. Кто может подсказать какой пакет python лучше использовать для пакетной вставки строк в таблицу приемник? pandas? Что-то еще есть?
нативный sql через драйвер ))))))
VR
а, это было, да?
А
нативный sql через драйвер ))))))
А вы в своих джобах аирфлоу сами так данные перекидываете между базами? 🤔
VR
А вы в своих джобах аирфлоу сами так данные перекидываете между базами? 🤔
Ну, вопрос был не про джобы в айрфлоу и передачей информации между базами)))
А
Ну, вопрос был не про джобы в айрфлоу и передачей информации между базами)))
В контексте аирфлоу
VR
В контексте аирфлоу
Есть задача. В ней питон, в ней данные, есть таблица, в которую данные положить. Айрфлоу тут вообще никакого контекста не имеет
А
Есть задача. В ней питон, в ней данные, есть таблица, в которую данные положить. Айрфлоу тут вообще никакого контекста не имеет
Аирфлоу тут имеет контекст такой, что в этом чатике сидят люди которые перекладывают данные. С помощью него конечно.
VR
Давайте лучше силы для разведения дискуссий переведем в другое русло, например, в гуглеж)))
А
Давайте лучше силы для разведения дискуссий переведем в другое русло, например, в гуглеж)))
Лучше закончим.
MV
Всем добрый вечер. Кто может подсказать какой пакет python лучше использовать для пакетной вставки строк в таблицу приемник? pandas? Что-то еще есть?
Peewee
А
Peewee
Спасибо посмотрю. Но я так думаю лучше pandas не найти. Он и на один инсерт нарежет данные и через copy можно вставлять.
MV
Можно посмотреть функции chunked и insert_many, возможно подойдут