IR
Size: a a a
2021 February 02
AR
спасибо!
w
Ребзя, а кто-то что-то юзал для обработки больших json? Типа что-то, что читает стрим из гигового json'a не загружая его в память, как например SAX парсер в xml?
SP
JSON или JSONL?
w
Обычный
VK
А разве можно json читать в стриме? Я давно слышал байку что мол этот формат такое не позволяет в отличие от xml.
Это байка или нет? 🤔
Это байка или нет? 🤔
MS
А ты управляешь источником, который генерит json?
MS
Или это данность?
w
Ребята, это умозрительная задача в вакууме, просто подумал, почему я такого не встречал, не может же быть, что никто так не делает
A
Ребзя, а кто-то что-то юзал для обработки больших json? Типа что-то, что читает стрим из гигового json'a не загружая его в память, как например SAX парсер в xml?
Oj
w
Предположим, что это данность
w
Oj
Oj может читать стрим в буффер и колбечить, когда встречает ключ?
MS
Чтоб json валидировать надо его весь получить
VK
Oj
Это вроде только сериалайзер/десериалайзер. Он вроде только ускоряет чтение/формирование
MS
Закрывающий тег будет на посдедних байтах
A
Oj может читать стрим в буффер и колбечить, когда встречает ключ?
MS
А как происходит валидация всего json по фрагменту?
MS
Я концептуально не вижу как эту задачу решить
w
А как происходит валидация всего json по фрагменту?
Ты можешь верить, что он валидный до первой ошибки