DF
А буферизацию терминала ты выключил?
Size: a a a
2020 October 18
VO
буферизация построчная
VO
информация об очередных 10к строках появляетс примерно через 10 секунд
VG
так и не показал скрипт и данные
VO
данных дохуя
VO
от скрипта уже мало что осталось
2020 October 19
ВР
Не, он просто смешал авк, сед и ещё пару языков -- и всё это для обработки текстов на естественном языке и составления отчётов.
Примечательно, что отчётами в наше время люди вообще не пользуются.
Примечательно, что отчётами в наше время люди вообще не пользуются.
Нынче отчёты просто выглядят так, как будто они ни разу ни отчёты. Выборка записей из базы данных для генерации потока для text/html - это как бы отчёт, но конечный результат выглядит не так, как отчёт в налоговую, а как какой-нибудь сайт "Одноклассники". 🤔
DF
Василий Степанович Родин
Нынче отчёты просто выглядят так, как будто они ни разу ни отчёты. Выборка записей из базы данных для генерации потока для text/html - это как бы отчёт, но конечный результат выглядит не так, как отчёт в налоговую, а как какой-нибудь сайт "Одноклассники". 🤔
Отчёт в налоговую сейчас выглядит как xml.
DF
А живые люди в гробу видали тоннах таблиц мелким шрифтом ковыряться. Так что нормально все выглядит.
SZ
А живые люди в гробу видали тоннах таблиц мелким шрифтом ковыряться. Так что нормально все выглядит.
++
ВР
Отчёт в налоговую сейчас выглядит как xml.
Так он выглядит для тех, кто знает - что такое xml. :-)
DF
Василий Степанович Родин
Так он выглядит для тех, кто знает - что такое xml. :-)
Да сейчас даже не надо знать как он выглядит и что из себя представляет. Все что умеет в налоговую отчетность сдавать его само генерит.
AG
что-то как-то медленно у меня простейший скрипт текстовый лог парсит, примерно 1к строк в секунду. это ведь слишком медленно?
Скорее всего неправильно регекспы сделаны, у меня под рукой скиптик — парсит регулярками 3.3 Гиговый сжатый XML за минуту, сколько там записей — не знаю, там всё в одну строку записано.
VO
в гиговом и одна запись может быть, а все остальное -- оформление
AG
минимум 630K записей, это то, что осталось после фильтрации
SZ
Скорее всего неправильно регекспы сделаны, у меня под рукой скиптик — парсит регулярками 3.3 Гиговый сжатый XML за минуту, сколько там записей — не знаю, там всё в одну строку записано.
И не только они, чувствую. Вероятно, ещё управление объектами
VO
вот скорее управлеие объектами
VG
кода, конечно, не будет
VO
630k/60 = 10krps. ну у меня сейчас поболее получается.
VO
какой код? наиболее интересную строку я уже показывал