В рейтинге участвует:

групп:

каналов:

Виртуальный сервер на SSD - недорого!

Аренда выделенных и виртуальных серверов (VDS/VPS), хостинг, аренда IP-адресов, администрирование, круглосуточная поддержка

qwarta.ru подробнее

Резервное копирование с проверкой на вирусы!!!

Удобный сервис создания резервных копий на любой сервер сети интернет. Отслеживайте изменения, проверяйте на вирусы. Надежно защитите свой бизнес!

go.backupland.com

Выбираете сервер? Любая конфигурация на заказ!

Аренда физических серверов любых конфигураций под любые запросы - 1С бухгалтерия, игровые сервера, нагруженные проекты, интернет-магазины!

qwarta.ru подробнее

Size: a a a

Astana JKUG

821 membersпожаловаться на группу
2020 November 23

o

olzhas in Astana JKUG
Eugene Svalukhin
в текущей реализации используется SXSSFWorkbook, но он делает временные файлы, из которых уже собирает единный документ, и уже этот документ потом отдается в http OutputStream. а хочется чтобы сразу в http outputstream отдавалось.
вроде сразу стримит.
источник
11:19пожаловаться#1

o

olzhas in Astana JKUG
я как раз такой вариант и искал что бы сразу стримил.
источник
11:19пожаловаться#2

o

olzhas in Astana JKUG
https://stackoverflow.com/questions/45092170/converting-a-large-data-into-excel-in-apachi-poi-java
Stack Overflow
Converting a large data into excel in Apachi POI Java
I am working on a large CSV (~200 mb of text file) which I would like to convert into excel sheet but the workbook becomes so memory consuming that in the middle of the process, Java throws "GC Ove...
источник
11:21пожаловаться#3

ES

Eugene Svalukhin in Astana JKUG
с момент отправки до того как у тебя хром начеет отображать индикатор скачивания не обращал сколько времени уходит?
источник
11:21пожаловаться#4

o

olzhas in Astana JKUG
вот от сюда брал.
источник
11:21пожаловаться#5

o

olzhas in Astana JKUG
неа. не обращал.
источник
11:21пожаловаться#6

ES

Eugene Svalukhin in Astana JKUG
допустим если в csv стримингом писать, то сразу появляется индикатор отображающий загрузку документа и получение байтов, в случае же SXSSFWorkbook, индикатор скачивания появляется через некоторое время, в моем случае при большом количестве данных может пройти достаточно много времени
источник
11:24пожаловаться#7

ES

Eugene Svalukhin in Astana JKUG
olzhas
вроде сразу стримит.
еще возможно у тебя из-за малого количества записей всё в памяти собиралось, но я в памяти не собираю, так как при большом количестве запросов и записей, может приехать OOM
источник
11:25пожаловаться#8

o

olzhas in Astana JKUG
ну может,  у меня на смом делене совсем честный стриминг, сперва в память выкачиваю. а потом в поток.
источник
11:27пожаловаться#9

o

olzhas in Astana JKUG
http://poi.apache.org/components/spreadsheet/how-to.html#sxssf
источник
11:29пожаловаться#10

o

olzhas in Astana JKUG
вот тут оригинальый код.
источник
11:29пожаловаться#11

M

MrKnyaz in Astana JKUG
Если используется blocking io то стримить не стоит. Лучше разделить сборку и скачивание если возможно. При скачивании по кускам отдавать
источник
11:32пожаловаться#12

M

MrKnyaz in Astana JKUG
Может даже сервис для этого отдельный написать
источник
11:32пожаловаться#13

M

MrKnyaz in Astana JKUG
Но так еще и клиента надо делать
источник
11:33пожаловаться#14

AZ

Arman Zhakupov in Astana JKUG
Eugene Svalukhin
ах, да, я забыл сказать что мне надо миллион и более записей уметь экспортировать :)
потом же документ не откроется, вроде эсель может открыть чуть больше миллиона строк
источник
11:40пожаловаться#15

TS

Tair Sab in Astana JKUG
Eugene Svalukhin
Ребята, есть вопрос по Apache POI, есть ли какой-то способ стримить сразу генерацию xlsx в http output stream? Я понимаю, что формат xlsx подразумевает, что надо чтобы появился целый файл (во временной директории), так как он гзипается, ну и там xmlки внутри еще лежат, ну а вдруг кто-то делал такое :)
по идее необязательно для зипа временный файл ))
источник
12:00пожаловаться#16

TS

Tair Sab in Astana JKUG
@esvalukhin https://github.com/tsabirgaliev/zip
GitHub
tsabirgaliev/zip
Lazy Streamed Zip Implementation. Contribute to tsabirgaliev/zip development by creating an account on GitHub.
источник
12:01пожаловаться#17

TS

Tair Sab in Astana JKUG
я правда не знаю, умеет ли excel работать с такими архивами, но думаю можно попробовать
источник
12:03пожаловаться#18

ES

Eugene Svalukhin in Astana JKUG
чисто теоретически получается, да можно похакать и устроить что-то наподобие стримингового зипа, который в себе определенный набор xml содержит
источник
12:07пожаловаться#19

TS

Tair Sab in Astana JKUG
НО нужно помнить, что “отдавать сразу клиенту” — не всегда безопасное решение с точки зрения ресурсов, так как базы данных обычно не любят долго открытые транзакции или курсоры
источник
12:08пожаловаться#20