в
у меня уже есть пара решении, но вдруг есть и по-умнее
Size: a a a
2021 January 14
a
пацаны, как думаете, как лучше сделать так, чтобы данные записывались по 100 строк в отдельные файлы?
а откуда эти данные вылазят?
a
и они по 1 строке ровно лезут или рандомно?
в
давай подробно поясню:
a
если ток 1 процесс то легко, держишь в памяти имя последнего файла и сколько строк записано, и пишешь. при запуске берешь последний файл и считаешь там строки. не совсем эффективно, но пох)
в
есть коллекция, в которую циклически добавляются данные (экземпляр класса), их по одному нужно преобразовывать в жсон и записывать построчно в файл. когда в одном файле набирается 100 таких записей, нужно создавать новый и так пока не кончится
в
вообще, мне это на джаве сделать надо, но в их чатах не отвечают, поэтому решил здесь спросить. принцип пойму
в
если ток 1 процесс то легко, держишь в памяти имя последнего файла и сколько строк записано, и пишешь. при запуске берешь последний файл и считаешь там строки. не совсем эффективно, но пох)
не, там очень дохера данных будет
в
десятки гигабайт
M🇷
Здравствуйте
Занимался кто
Не долблюсь ли я в
Занимался кто
@mtproto/core? Подскажете по поводу получения обновлений? Пару раз при перезапуске сервера всё норм, а потом обновления попросту не приходятНе долблюсь ли я в
FLOOD_WAIT_X?VL
есть коллекция, в которую циклически добавляются данные (экземпляр класса), их по одному нужно преобразовывать в жсон и записывать построчно в файл. когда в одном файле набирается 100 таких записей, нужно создавать новый и так пока не кончится
РО - нубский вопрос
Я не сильно понимаю проблему, фс.врайтЛайн и когда до 100 дойдешь то новый файл или я не так понял?
Я не сильно понимаю проблему, фс.врайтЛайн и когда до 100 дойдешь то новый файл или я не так понял?
в
до этого сам догадался, мож есть чот умнее?
VL
до этого сам догадался, мож есть чот умнее?
Шо за коллекция?
C
до этого сам догадался, мож есть чот умнее?
Да не особо, вполне в лоб решается, куда мудрить-то.
VL
А, думал монга, а там стримы есть
По поводу умнее, можно разве что танцевать вокруг твоего листа со всякими обсервеблами шоб на пуш в него летел ивент и шла обработка
По поводу умнее, можно разве что танцевать вокруг твоего листа со всякими обсервеблами шоб на пуш в него летел ивент и шла обработка
в
кстати норм идея
VL
чи очередь подруби и тогда мож скок хоч обработчиков пилить
но эт релевантно если прям реально триллион данных
но эт релевантно если прям реально триллион данных
a
есть коллекция, в которую циклически добавляются данные (экземпляр класса), их по одному нужно преобразовывать в жсон и записывать построчно в файл. когда в одном файле набирается 100 таких записей, нужно создавать новый и так пока не кончится
ну так создавай файл, щитай сколько ты туда строк записал, после чего закрывай и создавай новый. в чём проблема-то?
на джаве это кстати в 100 раз проще так как там синхронный код
на джаве это кстати в 100 раз проще так как там синхронный код