К
Нужно удалить закрытые. Оставить открытые и переоткрытые. Ну или черт с переоткрытыми, их мало, а мне для приблизительного анализа надо.
Size: a a a
2021 February 24
АК
Блин. XML весит более гига
АК
Надо писать парсинг потоковый :(
АК
Это больше времени займёт
К
Ой, ладно, самому потыкать интересно. Главное оно открывается в разном софте
l
Ой, ладно, самому потыкать интересно. Главное оно открывается в разном софте
мне вот тоже кажется, если по всей России закрывать, то пирог ни к чему
АК
Ага :(
FROM UNNEST(XPATH('/osm-notes/note', XMLPARSE(DOCUMENT
CONVERT_FROM(PG_READ_BINARY_FILE('/var/osm/XML/planet-notes-210224.xml'), 'UTF8')))) AS MYTEMPTABLE(MYXMLCOLUMN)
[2021-02-24 22:19:17] [54000] ОШИБКА: длина файла слишком великаК
По всей России закрывать два года будем. Нас не сотни, и даже не десятки
К
Ага :(
FROM UNNEST(XPATH('/osm-notes/note', XMLPARSE(DOCUMENT
CONVERT_FROM(PG_READ_BINARY_FILE('/var/osm/XML/planet-notes-210224.xml'), 'UTF8')))) AS MYTEMPTABLE(MYXMLCOLUMN)
[2021-02-24 22:19:17] [54000] ОШИБКА: длина файла слишком великаА если тупо вырезать все до 2015 года?
К
Может файл сократится
АК
Для этого надо вначале грузануть его либо в память либо в БД :)
АК
Чуть попозже сделаю. Посмотрю что там
К
Ну ладно, если не в напряг.
К
дело рыхлое
АК
АК
13 257 030 строк :)
АК
Теперь дело за малым. Построчно распарсить и залить в БД уже как сущности :)
M
13 257 030 строк :)
Это не закрытых по России?
АК
Это всего
АК
Теперь дело за малым. Построчно распарсить и залить в БД уже как сущности :)
!